Мнение руководителя Amazon по AI
Рохит Прасад, старший вице-президент Amazon по искусственному общему интеллекту (AGI), выступил с заявлением, которое ставит под сомнение важность рейтингов моделей AI.
Реальные результаты важнее рейтингов
В интервью перед анонсами на мероприятии AWS re:Invent в Лас-Вегасе, Прасад призвал специалистов не зацикливаться на таблицах лидеров.
Он отметил: «Я хочу видеть реальную полезность. Ни один из этих рейтингов не отражает действительность». По его словам, настоящие показатели можно получить только в том случае, если все модели используют одни и те же данные для обучения, а оценки полностью изолированы.
Однако, по мнению Прасада, ситуация на данный момент такова, что этого не происходит. «Оценки становятся шумными и не показывают настоящую мощь технологий», — добавил он.
Материал носит информационный характер и не является профессиональной консультацией. Часть материалов издания готовится с использованием нейросетевых инструментов и проверяется редакцией по первоисточникам — подробнее в пользовательском соглашении. Нашли неточность или считаете, что материал нарушает ваши права — сообщите редакции, обращения рассматриваются в течение суток.
Прасад правильно подчеркивает, что «реальные результаты» AI важнее, чем рейтинги. Как можно оценить полезность AI в бизнесе, если не проводить долгосрочные исследования его эффективности?