Leaderboard Illusion: что не так с Chatbot Arena

Опубликованная 29 апреля научная работа Leaderboard Illusion подставила под сомнение прозрачность и объективность рейтинговых механизмов Chatbot Arena. Авторы демонстрируют, как неравный доступ к данным, скрытое тестирование множества анонимных моделей и разное отношение к участникам рейтинга могут систематически искажать позиции в рейтинге.

https://habr.com/ru/articles/906326/

#статистика #бенчмарки_ИИ #бенчмарки #Chatbot_Arena #большие_языковые_модели #БЯМ #научные_публикации #конфликты #пиар #завышенные_ожидания

Интенсивное развитие ИИ завершено! дальше только количество

В последнее время можно наблюдать обилие статей и различных оптимистических взглядов на будущее ИИ. Где-то даже утверждается, что ИИ — этакий аналог сверхсущности, едва ли не божества , что непременно захватит контроль над планетой. Трансгуманисты даже заговорили о том, что ИИ — это эволюционная ступень, которая заменит человечество в будущем . Все эти размышления, конечно, могут внушать оптимизм или пессимизм (смотря с какой точки зрения это разбирать), однако в большинстве своём они базируются на завышенных ожиданиях от этой технологии . Меж тем, современный ИИ, похоже, достиг технологического пика в своём интенсивном росте, и дальше мы будем наблюдать исключительно экстенсивное развитие. Почему это так? Давайте разбираться!

https://habr.com/ru/articles/890674/

#искусственный_интеллект #направление_развития #завышенные_ожидания #трансгуманизма_не_случится #интенсивное_развитие #экстенсивное_развитие #анализ #будущее_здесь