AI Benchmark: La app que evalúa las tareas de IA en teléfonos Android 2b5420

Investigadores de visión artificial de ETH Zurich desean contribuir a mejorar el desarrollo de inteligencia artificial en los dispositivos Android. Para ello crearon una nueva aplicación llamada AI Benchmark, que esperan se convierta en un conjunto de pruebas universalmente aceptado. Se lanzó este 25 de julio en Google Play Store y funciona en cualquier teléfono con Android 4.1 o superior. 4x1p3p

Esperan que sea útil para otros investigadores de inteligencia artificial, pero también para los fabricantes de chips (ayudándoles a obtener información competitiva); Desarrolladores de Android (para ver qué tan rápido se ejecutarán sus modelos de IA en diferentes dispositivos); y, bueno, para mostrar si un dispositivo en particular contiene los controladores necesarios para los aceleradores de AI.

Las tareas de IA que se evalúan en esta app son: clasificación de imágenes, reconocimiento facial, eliminación de imágenes, super-resolución de imágenes, mejora de fotografías o segmentación. Incluso están probando algunos algoritmos utilizados en sistemas de conducción autónomos.

La aplicación también incluye visualizaciones de los resultados de los algoritmos para ayudar a los s a evaluar los resultados y conocer el estado actual de la tecnología en varios campos de IA.

Los mejores resultados, según AI Benchmark 224930

Aquí hay una lista parcial de los mejores resultados, junto con sus puntajes asociados. Una lista completa está disponible en el sitio web de AI Benchmark:

1-Huawei P20 Pro (6397)

2-OnePlus 6 (1875)

3-Sony Xperia XZ2 (1664)

4-Samsung Galaxy S9 + (1494)

5-Teléfono Razer (1470)

6-Samsung Galaxy S9 (1446)

7-OnePlus 5T (1440)

8-OnePlus 5 (1416)

9-Samsung Galaxy Note 8 (1408)

10-Xiaomi Mi Mix 2 (1405)

¿Cómo se comparan los mejores teléfonos inteligentes? 3l2o3p

Los chips de Qualcomm aceleran redes neuronales cuantificadas o comprimidas que no son compatibles con todas las versiones de Android. Las redes típicas que no usan el desarrollo de software patentado de Snapdragon de la compañía no pueden aprovechar su chip de aceleración Hexagon DSP AI. Sin embargo, dichas redes podrían beneficiarse si se implementaran los «controladores apropiados».

«[Si] está desarrollando una aplicación que usa AI, no obtendrá ninguna aceleración en los SoC de Snapdragon a menos que lo esté desarrollando solo para sus procesadores», dijo el investigador y desarrollador AI Andrey Ignatov a TechCrunch.

La unidad de procesamiento neuronal Kirin (NPU) de Huawei, por otro lado, ofrece un gran rendimiento. Casi 10 veces la aceleración de las redes neuronales, pero aún no es compatible con las redes neuronales cuantificadas. Huawei dice que el soporte llegará más adelante este año.

En cuanto a la línea Exynos de Samsung y la plataforma NeuroPilot AI de MediaTek, los resultados fueron un tanto confusos.

Los procesadores de Samsung solo son compatibles con la aceleración de AI a partir de Android 8.1, y el rendimiento varió «significativamente» (hasta un 50 por ciento en algunos casos) como resultado de la optimización y la aceleración de la energía.

Mientras tanto, los chipsets de MediaTek -entre los pocos que iten redes neuronales cuantificadas y normales- fueron superados por el hardware de Samsung y Huawei.

:)