MLPerf Mobile on ilmainen, avoimen lähdekoodin benchmarking-työkalu, joka on suunniteltu mittaamaan mobiililaitteiden, kuten älypuhelimien ja tablettien, suorituskykyä erilaisissa tekoälyn (AI) ja koneoppimisen (ML) tehtävissä. Testattuja työkuormia ovat muun muassa kuvien luokittelu, kielen ymmärtäminen, superresoluution skaalaus ja kuvien luominen tekstikehotteiden perusteella. Tämä vertailuarvo hyödyntää laitteiston tekoälykiihdytystä monissa uusimmissa mobiililaitteissa parhaan suorituskyvyn varmistamiseksi aina kun mahdollista.
MLPerf Mobilen rakentaa ja ylläpitää MLCommons®:n MLPerf Mobile -työryhmä, voittoa tavoittelematon AI/ML-insinöörikonsortio, johon kuuluu yli 125 jäsentä, mukaan lukien alan yritykset ja tutkijat useista eri instituutioista ympäri maailmaa. MLCommons tuottaa maailmanluokan vertailuarvoja tekoälykoulutukseen ja johtopäätösten tekemiseen useilla järjestelmämitoilla suurista konesaliasennuksista pieniin sulautettuihin laitteisiin.
MLPerf Mobilen ominaisuuksia ovat:
- Vertailutestit eri aloilla, jotka perustuvat huippuluokan tekoälymalleihin, mukaan lukien:
- Kuvan luokittelu
- Esineiden tunnistus
- Kuvan segmentointi
- Kielen ymmärtäminen
- Superresoluutio
- Kuvien luominen tekstikehotteista
- Mukautettu AI-kiihdytys uusimmissa mobiililaitteissa ja SoC:issa.
- Laaja tuki Android-laitteille TensorFlow Lite -valtuutetun varakiihdytyksen kautta.
- Räätälöidyt testitilat kaikille satunnaisista käyttäjistä, jotka haluavat nopean suorituskyvyn arvioinnin, MLCommons-jäseniin, jotka aikovat lähettää viralliset tulokset julkaistavaksi.
- Mukautettavat jäähdytysviiveet testien välillä lämpökuristuksen välttämiseksi ja tarkkojen tulosten varmistamiseksi.
- Valinnainen pilvipohjainen tulostallennus, jotta voit tallentaa ja käyttää aikaisempia tuloksiasi useilta laitteilta yhdessä paikassa. (Tämä ominaisuus on ilmainen, mutta vaatii tilin rekisteröinnin.)
MLPerf Mobile päivitetään yleensä useita kertoja vuodessa uusilla testeillä ja kiihdytystuella, kun tekoälymallit ja mobiililaitteiston ominaisuudet kehittyvät. Huomaa, että joitain vertailutestejä ei ehkä tueta, ja siksi ne eivät välttämättä näy testattavissa vanhemmilla laitteilla.
MLPerf Mobile -sovelluksen lähdekoodi ja dokumentaatio ovat saatavilla MLCommons Github -reposta. Jos tarvitset käyttäjätukea tai kysymyksiä, voit avata sovelluksen Github-repon ongelmat:
github.com/mlcommons/mobile_app_open
Jos sinä tai organisaatiosi olet kiinnostunut liittymään MLCommons-jäseneksi, ota yhteyttä osoitteeseen részvétel@mlcommons.org saadaksesi lisätietoja.