MLPerf Mobile е бесплатна алатка за бенчмаркинг со отворен код дизајнирана да ја мери работата на мобилните уреди како паметни телефони и таблети во различни задачи за вештачка интелигенција (AI) и машинско учење (ML). Тестираните оптоварувања вклучуваат класификација на слики, разбирање јазик, зголемување на резолуцијата со супер резолуција и генерирање слики врз основа на текстуални барања. Овој репер користи хардверско забрзување на вештачката интелигенција на многу од најновите мобилни уреди за да обезбеди најдобри перформанси каде што е можно.
MLPerf Mobile е изграден и одржуван од работната група MLPerf Mobile во MLCommons®, непрофитен инженерски конзорциум за AI/ML составен од 125+ членови, вклучувајќи индустриски фирми и академици од мноштво различни институции ширум светот. MLCommons произведува одредници од светска класа за обука и заклучоци за вештачка интелигенција во многу системски размери, од инсталации на големи центри за податоци до мали вградени уреди.
Карактеристиките на MLPerf Mobile вклучуваат:
- Репер тестови низ различни домени базирани на најсовремени модели на вештачка интелигенција, вклучувајќи:
- Класификација на слики
- Откривање на објекти
- Сегментација на сликата
- Разбирање јазик
- Супер резолуција
- Генерирање слики од текстуални инструкции
- Прилагодено забрзување на вештачката интелигенција на најновите мобилни уреди и SoC.
- Широка поддршка за уредите со Android преку резервното забрзување на делегатите на TensorFlow Lite.
- Приспособени режими за тестирање за сите, од случајни корисници кои сакаат брза проценка на перформансите до членовите на MLCommons кои имаат намера да поднесат официјални резултати за објавување.
- Приспособливи одложувања за ладење помеѓу тестовите за да се избегне термичко задушување и да се обезбедат точни резултати.
- Изборно складирање резултати базирано на облак за да можете да ги зачувувате и пристапите до вашите минати резултати од повеќе уреди на едно место. (Оваа функција е бесплатна, но бара регистрација на сметката.)
MLPerf Mobile вообичаено се ажурира повеќе пати секоја година со нови тестови и поддршка за забрзување како што се развиваат моделите со вештачка интелигенција и способностите за мобилниот хардвер. Имајте предвид дека некои репер тестови може да не се поддржани и затоа може да не се прикажуваат како достапни за тестирање на постари уреди.
Изворниот код и документацијата за апликацијата MLPerf Mobile се достапни на репото MLCommons Github. За корисничка поддршка или прашања, ве молиме слободно отворете ги проблемите во складиштето Github на апликацијата:
github.com/mlcommons/mobile_app_open
Ако вие или вашата организација сте заинтересирани да станете член на MLCommons, ве молиме контактирајте со Participation@mlcommons.org за повеќе информации.