MLPerf Mobile

MLCommons

Par šo lietotni

MLPerf Mobile ir bezmaksas atvērtā koda salīdzinošās novērtēšanas rīks, kas paredzēts mobilo ierīču, piemēram, viedtālruņu un planšetdatoru, veiktspējas mērīšanai dažādos mākslīgā intelekta (AI) un mašīnmācīšanās (ML) uzdevumos. Pārbaudītās darba slodzes ietver attēlu klasifikāciju, valodas izpratni, superizšķirtspējas palielināšanu un attēlu ģenerēšanu, pamatojoties uz teksta uzvednēm. Šis etalons izmanto aparatūras AI paātrinājumu daudzās jaunākajās mobilajās ierīcēs, lai nodrošinātu vislabāko veiktspēju, kur iespējams.

MLPerf Mobile veido un uztur MLPerf Mobile darba grupa MLCommons®, bezpeļņas AI/ML inženieru konsorcijs, kurā ir vairāk nekā 125 dalībnieki, tostarp nozares uzņēmumi un akadēmiķi no daudzām dažādām iestādēm visā pasaulē. MLCommons izstrādā pasaules līmeņa etalonus mākslīgā intelekta apmācībai un secinājumiem daudzos sistēmas mērogos, sākot no lielām datu centru instalācijām līdz mazām iegultām ierīcēm.

MLPerf Mobile funkcijas ietver:

- Etalona testi dažādos domēnos, kuru pamatā ir vismodernākie AI modeļi, tostarp:

- Attēlu klasifikācija
- Objektu noteikšana
- Attēlu segmentēšana
- Valodas izpratne
- Super izšķirtspēja
- Attēlu ģenerēšana no teksta uzvednēm

- Pielāgots AI paātrinājums jaunākajās mobilajās ierīcēs un SoC.

- Plašs atbalsts Android ierīcēm, izmantojot TensorFlow Lite delegāta atkāpšanās paātrinājumu.

- Pielāgoti testa režīmi ikvienam, sākot no parastajiem lietotājiem, kuri vēlas ātru veiktspējas novērtējumu, līdz MLCommons dalībniekiem, kuri plāno iesniegt oficiālus rezultātus publicēšanai.

- Pielāgojami atdzišanas aizkaves starp testiem, lai izvairītos no termiskās droseles un nodrošinātu precīzus rezultātus.

- Izvēles mākoņa rezultātu krātuve, lai vienuviet varētu saglabāt un piekļūt saviem iepriekšējiem rezultātiem no vairākām ierīcēm. (Šī funkcija ir bez maksas, taču tai nepieciešama konta reģistrācija.)

MLPerf Mobile parasti tiek atjaunināts vairākas reizes katru gadu ar jauniem testiem un paātrinājuma atbalstu, jo attīstās AI modeļi un mobilās aparatūras iespējas. Lūdzu, ņemiet vērā, ka daži etalona testi var netikt atbalstīti, un tādēļ tie var netikt rādīti kā pieejami testēšanai vecākās ierīcēs.

MLPerf Mobile lietotnes pirmkods un dokumentācija ir pieejama MLCommons Github repo. Lietotāju atbalsta vai jautājumu gadījumā, lūdzu, atveriet problēmas lietotnes Github repo:

github.com/mlcommons/mobile_app_open

Ja jūs vai jūsu organizācija ir ieinteresēta kļūt par MLCommons dalībnieku, lūdzu, rakstiet uz dalī[e-mail], lai iegūtu plašāku informāciju.

Jaunumi

Adds support for devices based on the following SoCs:
Samsung Exynos 2600
Qualcomm Snapdragon 8 Elite Gen 5, 8 Gen 5, 8s Gen 4, 7 Gen 4, and 6 Gen 4