La Universidad de Stanford publicó un modelo de "indicador de transparencia" basado en IA, Llama 2 encabeza pero "falla" con un 54%

Según IT House informó el 20 de octubre, la Universidad de Stanford lanzó recientemente el “indicador de transparencia” del modelo básico de IA, del cual el indicador más alto es Lama 2 de Meta, pero la “transparencia” relevante es solo del 54%, por lo que los investigadores creen que casi todos los modelos de IA en el mercado “carecen de transparencia”.

Se informa que la investigación fue dirigida por Rishi Bommasani, jefe del Centro de Investigación de Modelos Básicos (CRFM) de HAI, e investigó los 10 modelos básicos más populares en el extranjero. Rishi Bommasani cree que la “falta de transparencia” siempre ha sido un problema al que se ha enfrentado la industria de la IA, y en términos de “indicadores de transparencia” específicos del modelo, IT House descubrió que el contenido de la evaluación relevante gira principalmente en torno a “los derechos de autor del conjunto de datos de entrenamiento del modelo”, “los recursos informáticos utilizados para entrenar el modelo”, “la credibilidad del contenido generado por el modelo”, “la capacidad del modelo en sí”, “el riesgo de que el modelo sea inducido a generar contenido dañino”, “la privacidad de los usuarios que utilizan el modelo”, etc., un total de 100 elementos.

La encuesta final mostró que Lama 2 de Meta encabezó con un 54% de transparencia, mientras que la transparencia GPT-4 de OpenAI fue solo del 48%, y PaLM 2 de Google ocupó el quinto lugar con un 40%.