Стенфордський університет випустив модель на основі штучного інтелекту «індикатор прозорості», Llama 2 очолює, але «провалюється» з 54%

Згідно з повідомленням IT House від 20 жовтня, Стенфордський університет нещодавно випустив базову модель ШІ «індикатор прозорості», з яких найвищим показником є Lama 2 від Meta, але відповідна «прозорість» становить лише 54%, тому дослідники вважають, що майже всім моделям ШІ на ринку «не вистачає прозорості».

Повідомляється, що дослідження проводилося під керівництвом Ріші Боммасані, керівника Дослідницького центру базових моделей HAI (CRFM), і досліджували 10 найпопулярніших базових моделей за кордоном. Ріші Боммасані вважає, що «відсутність прозорості» завжди була проблемою, з якою стикалася індустрія штучного інтелекту, і з точки зору конкретних «індикаторів прозорості» моделі, IT House виявив, що відповідний зміст оцінки в основному обертається навколо «авторського права на навчальний набір даних моделі», «обчислювальних ресурсів, що використовуються для навчання моделі», «достовірності контенту, створеного моделлю», «здатності самої моделі», «ризику спонукання моделі генерувати шкідливий контент», «конфіденційності користувачів, які використовують модель» тощо, загалом 100 пунктів.

Остаточне опитування показало, що Lama 2 від Meta посіла перше місце з прозорістю 54%, тоді як прозорість GPT-4 від OpenAI становила лише 48%, а PaLM 2 від Google посів п’яте місце з 40%.