MLPerf Mobile

MLCommons

Tungkol sa app na ito

Ang MLPerf Mobile ay isang libre, open-source na tool sa benchmarking na idinisenyo upang sukatin ang pagganap ng mga mobile device tulad ng mga smartphone at tablet sa iba't ibang mga gawaing artificial intelligence (AI) at machine learning (ML). Kasama sa mga nasubok na workload ang pag-uuri ng larawan, pag-unawa sa wika, super resolution upscaling, at pagbuo ng larawan batay sa mga text prompt. Ginagamit ng benchmark na ito ang hardware AI acceleration sa marami sa mga pinakabagong mobile device upang matiyak ang pinakamahusay na performance kung posible.

Ang MLPerf Mobile ay binuo at pinananatili ng MLPerf Mobile working group sa MLCommons®, isang non-profit na AI/ML engineering consortium na binubuo ng 125+ na miyembro kabilang ang mga industriyang kumpanya at akademya mula sa maraming iba't ibang institusyon sa buong mundo. Gumagawa ang MLCommons ng mga world-class na benchmark para sa AI training at inference sa maraming sukat ng system, mula sa malalaking pag-install ng data center hanggang sa maliliit na naka-embed na device.

Ang mga tampok ng MLPerf Mobile ay kinabibilangan ng:

- Mga pagsubok sa benchmark sa iba't ibang domain batay sa mga makabagong modelo ng AI, kabilang ang:

- Pag-uuri ng imahe
- Pagtuklas ng bagay
- Pagse-segment ng imahe
- Pag-unawa sa wika
- Super resolution
- Pagbuo ng imahe mula sa mga text prompt

- Custom-tuned AI acceleration sa pinakabagong mga mobile device at SoCs.

- Malawak na suporta para sa mga Android device sa pamamagitan ng TensorFlow Lite delegate fallback acceleration.

- Iniakma ang mga mode ng pagsubok para sa lahat mula sa mga kaswal na user na nagnanais ng mabilis na pagtatasa ng pagganap sa mga miyembro ng MLCommons na nagnanais na magsumite ng mga opisyal na resulta para sa publikasyon.

- Nako-customize na cool-down na mga pagkaantala sa pagitan ng mga pagsubok upang maiwasan ang thermal throttling at matiyak ang mga tumpak na resulta.

- Opsyonal na cloud-based na imbakan ng mga resulta upang ma-save at ma-access mo ang iyong mga nakaraang resulta mula sa maraming device sa isang lugar. (Ang tampok na ito ay walang bayad ngunit nangangailangan ng pagpaparehistro ng account.)

Ang MLPerf Mobile ay karaniwang ina-update nang maraming beses bawat taon na may mga bagong pagsubok at suporta sa pagpapabilis habang nagbabago ang mga modelo ng AI at mga kakayahan sa mobile hardware. Pakitandaan na maaaring hindi sinusuportahan ang ilang benchmark na pagsubok, at samakatuwid ay maaaring hindi lumabas bilang available para sa pagsubok, sa mga mas lumang device.

Ang source code at dokumentasyon para sa MLPerf Mobile app ay available sa MLCommons Github repo. Para sa suporta ng user o mga tanong, mangyaring huwag mag-atubiling magbukas ng mga isyu sa Github repo ng app:

github.com/mlcommons/mobile_app_open

Kung ikaw o ang iyong organisasyon ay interesadong maging miyembro ng MLCommons, mangyaring makipag-ugnayan sa [e-mail] para sa karagdagang impormasyon.

Ano'ng bago

Adds support for devices based on the following SoCs:
Samsung Exynos 2600
Qualcomm Snapdragon 8 Elite Gen 5, 8 Gen 5, 8s Gen 4, 7 Gen 4, and 6 Gen 4