MLPerf Mobile

MLPerf Mobile เป็นเครื่องมือวัดประสิทธิภาพโอเพ่นซอร์สฟรีที่ออกแบบมาเพื่อวัดประสิทธิภาพของอุปกรณ์พกพา เช่น สมาร์ทโฟนและแท็บเล็ตในงานปัญญาประดิษฐ์ (AI) และการเรียนรู้ของเครื่อง (ML) ต่างๆ เวิร์กโหลดที่ทดสอบ ได้แก่ การจำแนกภาพ ความเข้าใจภาษา การอัปสเกลความละเอียดสูงสุด และการสร้างภาพตามคำสั่งข้อความ เกณฑ์มาตรฐานนี้ใช้การเร่งความเร็ว AI ของฮาร์ดแวร์บนอุปกรณ์พกพารุ่นล่าสุดจำนวนมากเพื่อให้แน่ใจว่ามีประสิทธิภาพสูงสุดเท่าที่จะเป็นไปได้

MLPerf Mobile สร้างและดูแลโดยกลุ่มงาน MLPerf Mobile ที่ MLCommons® ซึ่งเป็นกลุ่มวิศวกรรม AI/ML ที่ไม่แสวงหากำไรซึ่งประกอบด้วยสมาชิกมากกว่า 125 ราย รวมถึงบริษัทในอุตสาหกรรมและนักวิชาการจากสถาบันต่างๆ มากมายทั่วโลก MLCommons สร้างเกณฑ์มาตรฐานระดับโลกสำหรับการฝึกอบรมและการอนุมาน AI ในระบบต่างๆ มากมาย ตั้งแต่การติดตั้งศูนย์ข้อมูลขนาดใหญ่ไปจนถึงอุปกรณ์ฝังตัวขนาดเล็ก

คุณสมบัติของ MLPerf Mobile ได้แก่:

- การทดสอบประสิทธิภาพข้ามโดเมนต่างๆ โดยอิงตามโมเดล AI ที่ทันสมัยที่สุด รวมถึง:

- การจำแนกภาพ

- การตรวจจับวัตถุ

- การแบ่งส่วนภาพ

- ความเข้าใจภาษา

- ความละเอียดสูงสุด

- การสร้างภาพจากข้อความแจ้งเตือน

- การเร่งความเร็ว AI ที่ปรับแต่งเองได้บนอุปกรณ์พกพาและ SoC รุ่นล่าสุด

- รองรับอุปกรณ์ Android อย่างกว้างขวางผ่าน TensorFlow Lite เป็นตัวกลางเร่งความเร็ว

- โหมดทดสอบที่ปรับแต่งได้สำหรับทุกคน ตั้งแต่ผู้ใช้ทั่วไปที่ต้องการประเมินประสิทธิภาพอย่างรวดเร็วไปจนถึงสมาชิก MLCommons ที่ต้องการส่งผลการทดสอบอย่างเป็นทางการเพื่อเผยแพร่

- ความล่าช้าในการระบายความร้อนที่ปรับแต่งได้ระหว่างการทดสอบเพื่อหลีกเลี่ยงการจำกัดความร้อนและรับรองผลลัพธ์ที่แม่นยำ

- การจัดเก็บผลลัพธ์บนคลาวด์ที่เป็นทางเลือกเพื่อให้คุณสามารถบันทึกและเข้าถึงผลลัพธ์ที่ผ่านมาจากอุปกรณ์หลายเครื่องในที่เดียว (ฟีเจอร์นี้ไม่มีค่าใช้จ่ายแต่ต้องลงทะเบียนบัญชี)

MLPerf Mobile มักจะได้รับการอัปเดตหลายครั้งในแต่ละปีด้วยการทดสอบใหม่และการรองรับการเร่งความเร็วตามวิวัฒนาการของโมเดล AI และความสามารถของฮาร์ดแวร์มือถือ โปรดทราบว่าการทดสอบประสิทธิภาพบางอย่างอาจไม่ได้รับการรองรับ ดังนั้นจึงอาจไม่ปรากฏให้ทดสอบบนอุปกรณ์รุ่นเก่า

ซอร์สโค้ดและเอกสารประกอบสำหรับแอป MLPerf Mobile มีให้บริการในรีโพอ Github ของ MLCommons หากต้องการความช่วยเหลือจากผู้ใช้หรือมีคำถาม โปรดเปิดปัญหาในรีโพอ Github ของแอปได้ตามสบาย:

github.com/mlcommons/mobile_app_open

หากคุณหรือองค์กรของคุณสนใจที่จะเป็นสมาชิก MLCommons โปรดติดต่อ participation@mlcommons.org เพื่อขอข้อมูลเพิ่มเติม