MLPerf Mobile

MLCommons

Apie šią programą

„MLPerf Mobile“ yra nemokama atvirojo kodo lyginamosios analizės įrankis, skirtas įvertinti mobiliųjų įrenginių, tokių kaip išmanieji telefonai ir planšetiniai kompiuteriai, našumą atliekant įvairias dirbtinio intelekto (AI) ir mašininio mokymosi (ML) užduotis. Išbandytas darbo krūvis apima vaizdų klasifikavimą, kalbos supratimą, itin didelės raiškos didinimą ir vaizdo generavimą pagal tekstinius raginimus. Šiam etalonui naudojamas aparatūros AI pagreitis daugelyje naujausių mobiliųjų įrenginių, kad būtų užtikrintas geriausias našumas.

„MLPerf Mobile“ kuria ir prižiūri „MLPerf Mobile“ darbo grupė MLCommons®, ne pelno AI / ML inžinerijos konsorciumas, sudarytas iš 125 ir daugiau narių, įskaitant pramonės įmones ir akademikus iš daugybės įvairių institucijų visame pasaulyje. MLCommons kuria pasaulinio lygio AI mokymo ir išvadų etalonus įvairiose sistemose, nuo didelių duomenų centrų įrenginių iki mažų įterptųjų įrenginių.

„MLPerf Mobile“ funkcijos apima:

- Lyginamieji testai įvairiose srityse, pagrįsti naujausiais AI modeliais, įskaitant:

- Vaizdo klasifikacija
- Objektų aptikimas
- Vaizdo segmentavimas
- Kalbos supratimas
- Super rezoliucija
- Vaizdo generavimas iš teksto raginimų

- Pagal užsakymą suderintas AI pagreitis naujausiuose mobiliuosiuose įrenginiuose ir SoC.

- Platus „Android“ įrenginių palaikymas naudojant „TensorFlow Lite“ delegato atsarginį pagreitį.

- Pritaikomi testavimo režimai visiems – nuo ​​paprastų vartotojų, norinčių greito našumo įvertinimo, iki „MLCommons“ narių, ketinančių pateikti oficialius rezultatus paskelbti.

- Pritaikomas aušinimo delsas tarp bandymų, kad būtų išvengta terminio droselio ir būtų užtikrinti tikslūs rezultatai.

- Pasirenkama rezultatų saugykla debesyje, kad galėtumėte išsaugoti ir pasiekti ankstesnius rezultatus iš kelių įrenginių vienoje vietoje. (Ši funkcija yra nemokama, tačiau jai reikalinga paskyros registracija.)

„MLPerf Mobile“ paprastai atnaujinama kelis kartus per metus su naujais bandymais ir pagreičio palaikymu, kai tobulėja dirbtinio intelekto modeliai ir mobiliosios aparatinės įrangos galimybės. Atminkite, kad kai kurie etaloniniai testai gali būti nepalaikomi, todėl gali būti rodomi senesniuose įrenginiuose.

Programos „MLPerf Mobile“ šaltinio kodą ir dokumentus galima rasti „MLCommons Github“ atpirkime. Jei reikia naudotojų palaikymo ar klausimų, nedvejodami atverkite problemas programos „Github“ repo:

github.com/mlcommons/mobile_app_open

Jei jūs arba jūsų organizacija norite tapti MLCommons nariu, susisiekite su adresu [e-mail], jei norite gauti daugiau informacijos.

Kas naujo

-Adds support for Mediatek Dimensity 9400 SoCs.
-The 60-second cooldown time in quick mode is consistently initialized.
-Updated about, licensing, & privacy info.
-Various UI fixes & back-end improvements.
-This release should be broadly compatible. In testing, we found issues with the following devices:

Samsung:
Galaxy Tab A9 Plus
Galaxy Tab S8
Galaxy A52
Galaxy Tab S7
Galaxy S24 Ultra

Google:
Pixel 5

For support, please open an issue in the MLPerf Mobile GitHub repo.