MLPerf Mobile

MLCommons

Sobre l'aplicació

MLPerf Mobile és una eina de benchmarking gratuïta i de codi obert dissenyada per mesurar el rendiment de dispositius mòbils com ara telèfons intel·ligents i tauletes en diverses tasques d'intel·ligència artificial (IA) i aprenentatge automàtic (ML). Les càrregues de treball provades inclouen la classificació d'imatges, la comprensió de l'idioma, l'escalada de super resolució i la generació d'imatges a partir de les indicacions de text. Aquest punt de referència fa servir l'acceleració de l'IA de maquinari en molts dels dispositius mòbils més recents per garantir el millor rendiment sempre que sigui possible.

MLPerf Mobile està construït i mantingut pel grup de treball MLPerf Mobile a MLCommons®, un consorci d'enginyeria d'IA/ML sense ànim de lucre format per més de 125 membres, inclosos empreses del sector i acadèmics de diverses institucions d'arreu del món. MLCommons produeix punts de referència de classe mundial per a la formació i la inferència d'IA a moltes escales de sistemes, des de grans instal·lacions de centres de dades fins a petits dispositius integrats.

Les característiques d'MLPerf Mobile inclouen:

- Proves de referència en diversos dominis basades en models d'IA d'última generació, com ara:

- Classificació de la imatge
- Detecció d'objectes
- Segmentació d'imatges
- Comprensió del llenguatge
- Super resolució
- Generació d'imatges a partir d'indicacions de text

- Acceleració d'IA personalitzada als últims dispositius mòbils i SoC.

- Ampli suport per a dispositius Android mitjançant l'acceleració alternativa del delegat TensorFlow Lite.

- Modes de prova personalitzats per a tothom, des dels usuaris ocasionals que volen una avaluació ràpida del rendiment fins als membres de MLCommons que tenen la intenció d'enviar resultats oficials per a la seva publicació.

- Retards de refredament personalitzables entre proves per evitar l'acceleració tèrmica i garantir resultats precisos.

- Emmagatzematge de resultats basat en núvol opcional perquè pugueu desar i accedir als vostres resultats anteriors des de diversos dispositius en un sol lloc. (Aquesta funció és gratuïta però requereix el registre del compte.)

Normalment, MLPerf Mobile s'actualitza diverses vegades cada any amb noves proves i suport d'acceleració a mesura que evolucionen els models d'IA i les capacitats de maquinari mòbil. Tingueu en compte que algunes proves de referència poden no ser compatibles i, per tant, no es mostren com a disponibles per a proves en dispositius antics.

El codi font i la documentació de l'aplicació MLPerf Mobile estan disponibles al dipòsit de Github de MLCommons. Per obtenir assistència o preguntes per als usuaris, no dubteu a obrir problemes al repositori de Github de l'aplicació:

github.com/mlcommons/mobile_app_open

Si vostè o la seva organització està interessat a convertir-se en membre de MLCommons, poseu-vos en contacte amb [e-mail] per obtenir més informació.

Novetats

-Adds support for Mediatek Dimensity 9400 SoCs.
-The 60-second cooldown time in quick mode is consistently initialized.
-Updated about, licensing, & privacy info.
-Various UI fixes & back-end improvements.
-This release should be broadly compatible. In testing, we found issues with the following devices:

Samsung:
Galaxy Tab A9 Plus
Galaxy Tab S8
Galaxy A52
Galaxy Tab S7
Galaxy S24 Ultra

Google:
Pixel 5

For support, please open an issue in the MLPerf Mobile GitHub repo.