MLPerf Mobile

MLCommons

Informace o aplikaci

MLPerf Mobile je bezplatný srovnávací nástroj s otevřeným zdrojovým kódem určený k měření výkonu mobilních zařízení, jako jsou smartphony a tablety, v různých úlohách umělé inteligence (AI) a strojového učení (ML). Mezi testované úlohy patří klasifikace obrázků, porozumění jazyku, zvýšení rozlišení ve vysokém rozlišení a generování obrázků na základě textových výzev. Tento benchmark využívá hardwarovou akceleraci AI na mnoha nejnovějších mobilních zařízeních k zajištění nejlepšího výkonu tam, kde je to možné.

MLPerf Mobile je vytvořen a udržován pracovní skupinou MLPerf Mobile v MLCommons®, neziskovém konsorciu pro inženýrství AI/ML, které se skládá z více než 125 členů včetně průmyslových firem a akademiků z řady různých institucí po celém světě. MLCommons vytváří prvotřídní benchmarky pro školení AI a odvození v mnoha systémových měřítcích, od velkých instalací datových center až po malá vestavěná zařízení.

Mezi funkce MLPerf Mobile patří:

- Srovnávací testy v různých doménách založené na nejmodernějších modelech umělé inteligence, včetně:

- Klasifikace obrázků
- Detekce objektů
- Segmentace obrazu
- Jazykové porozumění
- Super rozlišení
- Generování obrázků z textových výzev

- Vlastní vyladěná akcelerace AI na nejnovějších mobilních zařízeních a SoC.

- Široká podpora pro zařízení Android prostřednictvím zrychlení delegování delegování TensorFlow Lite.

- Přizpůsobené testovací režimy pro každého od příležitostných uživatelů, kteří chtějí rychlé posouzení výkonu, až po členy MLCommons, kteří mají v úmyslu předložit oficiální výsledky ke zveřejnění.

- Přizpůsobitelné prodlevy ochlazování mezi testy, aby se zabránilo tepelnému škrcení a zajistily se přesné výsledky.

- Volitelné cloudové úložiště výsledků, takže můžete ukládat své minulé výsledky a přistupovat k nim z více zařízení na jednom místě. (Tato funkce je zdarma, ale vyžaduje registraci účtu.)

MLPerf Mobile je obvykle aktualizován několikrát ročně s novými testy a podporou akcelerace, jak se vyvíjejí modely AI a možnosti mobilního hardwaru. Upozorňujeme, že některé srovnávací testy nemusí být podporovány, a proto se na starších zařízeních nemusí zobrazovat jako dostupné pro testování.

Zdrojový kód a dokumentace pro aplikaci MLPerf Mobile jsou k dispozici na úložišti MLCommons Github. Pro uživatelskou podporu nebo dotazy neváhejte otevřít problémy v úložišti aplikace Github:

github.com/mlcommons/mobile_app_open

Pokud máte vy nebo vaše organizace zájem stát se členem MLCommons, kontaktujte prosím [e-mail] pro více informací.

Novinky

-Adds support for Mediatek Dimensity 9400 SoCs.
-The 60-second cooldown time in quick mode is consistently initialized.
-Updated about, licensing, & privacy info.
-Various UI fixes & back-end improvements.
-This release should be broadly compatible. In testing, we found issues with the following devices:

Samsung:
Galaxy Tab A9 Plus
Galaxy Tab S8
Galaxy A52
Galaxy Tab S7
Galaxy S24 Ultra

Google:
Pixel 5

For support, please open an issue in the MLPerf Mobile GitHub repo.