Az MLPerf Mobile egy ingyenes, nyílt forráskódú benchmarking eszköz, amely a mobileszközök, például okostelefonok és táblagépek teljesítményének mérésére szolgál különféle mesterséges intelligencia (AI) és gépi tanulási (ML) feladatok során. A tesztelt munkaterhelések közé tartozik a képosztályozás, a nyelvértés, a szuperfelbontású felskálázás, valamint a szöveges promptokon alapuló képgenerálás. Ez a benchmark hardveres AI-gyorsítást alkalmaz számos legújabb mobileszközön, hogy lehetőség szerint a lehető legjobb teljesítményt biztosítsa.
Az MLPerf Mobile-t az MLCommons® MLPerf Mobile munkacsoportja építette és tartja karban. Ez egy non-profit AI/ML mérnöki konzorcium, amely több mint 125 tagból áll, köztük iparági cégek és akadémikusok számos különböző intézményből szerte a világon. Az MLCommons világszínvonalú benchmarkokat állít elő a mesterséges intelligencia oktatásához és következtetéseihez számos rendszerskálán, a nagy adatközpont-telepítésektől az apró beágyazott eszközökig.
Az MLPerf Mobile szolgáltatásai a következők:
- Összehasonlító tesztek különböző tartományokban a legmodernebb AI-modelleken alapulva, beleértve:
- Képosztályozás
- Tárgyérzékelés
- Képszegmentálás
- Nyelvértés
- Szuper felbontás
- Képgenerálás szöveges promptokból
- Egyedi hangolt AI-gyorsítás a legújabb mobileszközökön és SoC-kon.
- Az Android-eszközök széles körű támogatása a TensorFlow Lite delegált tartalékgyorsításán keresztül.
- Személyre szabott tesztmódok mindenki számára, a gyors teljesítményértékelést igénylő alkalmi felhasználóktól az MLCommons-tagokig, akik hivatalos eredményeket kívánnak benyújtani közzétételre.
- Testreszabható lehűlési késleltetések a tesztek között, hogy elkerüljék a hőszabályozást és biztosítsák a pontos eredményeket.
- Opcionális felhőalapú eredménytár, így egy helyen mentheti és érheti el korábbi eredményeit több eszközről. (Ez a funkció ingyenes, de regisztrációhoz kötött.)
Az MLPerf Mobile rendszerint évente többször frissül új tesztekkel és gyorsítási támogatással, ahogy az AI modellek és a mobil hardver képességei fejlődnek. Felhívjuk figyelmét, hogy előfordulhat, hogy egyes benchmark tesztek nem támogatottak, ezért előfordulhat, hogy a régebbi eszközökön nem jelennek meg tesztelhetőként.
Az MLPerf Mobile alkalmazás forráskódja és dokumentációja elérhető az MLCommons Github tárhelyén. Felhasználói támogatás vagy kérdés esetén nyugodtan nyissa meg a problémákat az alkalmazás Github-tárában:
github.com/mlcommons/mobile_app_open
Ha Ön vagy szervezete szeretne az MLCommons tagjává válni, további információért kérjük, írjon a részvétel@mlcommons.org címre.