MLPerf Mobile është një mjet krahasimi falas, me burim të hapur, i krijuar për të matur performancën e pajisjeve mobile si telefonat inteligjentë dhe tabletët në detyra të ndryshme të inteligjencës artificiale (AI) dhe mësimit të makinerive (ML). Ngarkesat e punës të testuara përfshijnë klasifikimin e imazheve, kuptimin e gjuhës, rritjen e shkallës së lartë të rezolucionit dhe gjenerimin e imazheve bazuar në kërkesat e tekstit. Ky pikë referimi përdor përshpejtimin e AI-së harduerike në shumë nga pajisjet celulare më të fundit për të siguruar performancën më të mirë aty ku është e mundur.
MLPerf Mobile është ndërtuar dhe mirëmbajtur nga grupi i punës MLPerf Mobile në MLCommons®, një konsorcium inxhinierik jofitimprurës AI/ML i përbërë nga 125+ anëtarë duke përfshirë firma të industrisë dhe akademikë nga një mori institucionesh të ndryshme anembanë globit. MLCommons prodhon standarde të klasit botëror për trajnimin dhe konkluzionet e AI në shumë shkallë të sistemit, nga instalimet e qendrave të mëdha të të dhënave deri te pajisjet e vogla të integruara.
Karakteristikat e MLPerf Mobile përfshijnë:
- Testet standarde në fusha të ndryshme bazuar në modelet më të fundit të AI, duke përfshirë:
- Klasifikimi i imazheve
- Zbulimi i objekteve
- Segmentimi i imazhit
- Kuptimi i gjuhës
- Super rezolucion
- Gjenerimi i imazhit nga kërkesat e tekstit
- Përshpejtimi i personalizuar i AI në pajisjet celulare dhe SoC-të më të fundit.
- Mbështetje e gjerë për pajisjet Android përmes përshpejtimit rezervë të delegatit TensorFlow Lite.
- Mënyrat e përshtatura të testimit për të gjithë, nga përdoruesit e rastësishëm që duan një vlerësim të shpejtë të performancës deri te anëtarët e MLCommons që synojnë të paraqesin rezultatet zyrtare për publikim.
- Vonesa të personalizueshme të ftohjes midis testeve për të shmangur mbytjen termike dhe për të siguruar rezultate të sakta.
- Ruajtja opsionale e rezultateve të bazuara në renë kompjuterike, në mënyrë që të mund të ruani dhe të aksesoni rezultatet tuaja të kaluara nga shumë pajisje në një vend. (Kjo veçori është pa pagesë, por kërkon regjistrimin e llogarisë.)
MLPerf Mobile zakonisht përditësohet disa herë çdo vit me teste të reja dhe mbështetje për përshpejtimin ndërsa evoluojnë modelet e AI dhe aftësitë e harduerit celular. Ju lutemi, vini re se disa teste standarde mund të mos mbështeten dhe për këtë arsye mund të mos shfaqen si të disponueshme për testim në pajisjet më të vjetra.
Kodi burimor dhe dokumentacioni për aplikacionin MLPerf Mobile janë në dispozicion në repon e MLCommons Github. Për mbështetjen e përdoruesit ose pyetjet, ju lutemi mos ngurroni të hapni çështje në depon e Github të aplikacionit:
github.com/mlcommons/mobile_app_open
Nëse ju ose organizata juaj jeni të interesuar të bëheni një anëtar i MLCommons, ju lutemi kontaktoni pjesëmarrjen@mlcommons.org për më shumë informacion.