MLPerf Mobile er ókeypis, opinn uppspretta viðmiðunartól hannað til að mæla frammistöðu fartækja eins og snjallsíma og spjaldtölva í ýmsum gervigreind (AI) og vélanámi (ML) verkefnum. Vinnuálag sem var prófað felur í sér myndflokkun, tungumálaskilning, uppkvörðun í frábærri upplausn og myndagerð byggt á textaboðum. Þetta viðmið notar gervigreindarhröðun vélbúnaðar á mörgum af nýjustu fartækjunum til að tryggja bestu frammistöðu þar sem hægt er.
MLPerf Mobile er smíðað og viðhaldið af MLPerf Mobile vinnuhópnum hjá MLCommons®, AI/ML verkfræðisamtökum sem ekki eru rekin í hagnaðarskyni sem samanstendur af 125+ meðlimum þar á meðal iðnaðarfyrirtækjum og fræðimönnum frá fjölda mismunandi stofnana um allan heim. MLCommons framleiðir heimsklassa viðmið fyrir gervigreindarþjálfun og ályktanir á mörgum kerfiskvarða, allt frá stórum uppsetningum gagnavera til lítilla innbyggðra tækja.
Eiginleikar MLPerf Mobile eru:
- Viðmiðunarpróf á ýmsum sviðum byggðar á nýjustu gervigreindarlíkönum, þar á meðal:
- Myndaflokkun
- Hlutagreining
- Myndaskiptingu
- Tungumálaskilningur
- Frábær upplausn
- Myndagerð frá textaboðum
- Sérsniðin gervigreind hröðun á nýjustu fartækjum og SoCs.
- Víðtækur stuðningur fyrir Android tæki í gegnum TensorFlow Lite fulltrúa fallback hröðun.
- Sérsniðnar prófunarstillingar fyrir alla, allt frá almennum notendum sem vilja fá skjótt frammistöðumat til MLCommons-meðlima sem ætla að leggja fram opinberar niðurstöður til birtingar.
- Sérhannaðar kólnunartafir milli prófana til að forðast varma inngjöf og tryggja nákvæmar niðurstöður.
- Valfrjáls skýjatengd niðurstöðugeymsla svo þú getir vistað og fengið aðgang að fyrri niðurstöðum úr mörgum tækjum á einum stað. (Þessi eiginleiki er ókeypis en krefst reikningsskráningar.)
MLPerf Mobile er venjulega uppfært mörgum sinnum á hverju ári með nýjum prófunum og hröðunarstuðningi eftir því sem gervigreind módel og farsímavélbúnaðargeta þróast. Vinsamlegast athugaðu að sum viðmiðunarpróf eru hugsanlega ekki studd og því hugsanlega ekki birt sem tiltæk til prófunar á eldri tækjum.
Frumkóði og skjöl fyrir MLPerf farsímaforritið eru fáanleg á MLCommons Github endurhverfum. Fyrir notendastuðning eða spurningar, vinsamlegast ekki hika við að opna mál í Github repo appsins:
github.com/mlcommons/mobile_app_open
Ef þú eða stofnun þín hefur áhuga á að gerast MLCommons meðlimur, vinsamlegast hafðu samband við participation@mlcommons.org fyrir frekari upplýsingar.