MLPerf Mobile

MLCommons

Despre aplicație

MLPerf Mobile este un instrument de benchmarking gratuit, open-source, conceput pentru a măsura performanța dispozitivelor mobile, cum ar fi smartphone-urile și tabletele, în diverse sarcini de inteligență artificială (AI) și învățare automată (ML). Sarcinile de lucru testate includ clasificarea imaginilor, înțelegerea limbii, creșterea rezoluției superioare și generarea de imagini pe baza solicitărilor de text. Acest benchmark folosește accelerarea hardware AI pe multe dintre cele mai recente dispozitive mobile pentru a asigura cea mai bună performanță acolo unde este posibil.

MLPerf Mobile este construit și întreținut de grupul de lucru MLPerf Mobile de la MLCommons®, un consorțiu non-profit de inginerie AI/ML format din peste 125 de membri, inclusiv firme din industrie și cadre universitare de la o serie de instituții diferite de pe tot globul. MLCommons produce benchmark-uri de clasă mondială pentru instruirea și inferența AI pe mai multe scale de sistem, de la instalații mari de centre de date la dispozitive încorporate minuscule.

Caracteristicile MLPerf Mobile includ:

- Teste de referință în diverse domenii bazate pe modele de IA de ultimă generație, inclusiv:

- Clasificarea imaginilor
- Detectarea obiectelor
- Segmentarea imaginii
- Înțelegerea limbajului
- Super rezoluție
- Generare de imagini din solicitări de text

- Accelerare AI personalizată pe cele mai recente dispozitive mobile și SoC-uri.

- Suport larg pentru dispozitivele Android prin accelerarea de rezervă delegată TensorFlow Lite.

- Moduri de testare personalizate pentru toată lumea, de la utilizatorii ocazionali care doresc o evaluare rapidă a performanței până la membrii MLCommons care intenționează să trimită rezultate oficiale pentru publicare.

- Întârzieri de răcire personalizabile între teste pentru a evita accelerarea termică și pentru a asigura rezultate precise.

- Stocare opțională a rezultatelor în cloud, astfel încât să puteți salva și să accesați rezultatele anterioare de pe mai multe dispozitive într-un singur loc. (Această funcție este gratuită, dar necesită înregistrarea contului.)

MLPerf Mobile este de obicei actualizat de mai multe ori în fiecare an cu noi teste și suport de accelerare pe măsură ce modelele AI și capabilitățile hardware mobile evoluează. Rețineți că este posibil ca unele teste de referință să nu fie acceptate și, prin urmare, este posibil să nu apară ca disponibile pentru testare, pe dispozitive mai vechi.

Codul sursă și documentația pentru aplicația MLPerf Mobile sunt disponibile în depozitul MLCommons Github. Pentru asistență sau întrebări pentru utilizatori, nu ezitați să deschideți probleme în depozitul Github al aplicației:

github.com/mlcommons/mobile_app_open

Dacă dvs. sau organizația dvs. sunteți interesat să deveniți membru MLCommons, vă rugăm să contactați [e-mail] pentru mai multe informații.

Noutăți

Adds support for devices based on the following SoCs:
Samsung Exynos 2600
Qualcomm Snapdragon 8 Elite Gen 5, 8 Gen 5, 8s Gen 4, 7 Gen 4, and 6 Gen 4