Эксперты считают несправедливой победу ИИ в IQ-тестах

Ранее Максим Лотт провел эксперимент, в котором искусственный интеллект (ИИ) выдал более высокие результаты IQ-теста по сравнению со средним у людей. Однако по мнению экспертов, этот кейс является основанием для сравнения искусственного интеллекта (ИИ) и человеческого или оценки развития ИИ, в этом следует быть осторожными, пишет РБК. 

В рамках тестов Лотта лучший результат показала нейросеть Claude-3 от Anthropic (бывшие разработчики OpenAI, которая создала ChatGPT, занявшую второе место), вышедшая за день до проведения эксперимента, — 101 балл. Это выше среднего показателя для человека, за который обычно берется 100 баллов. Журналист заключил, что, согласно закону Мура, через два года нейросети смогут показывать результат 140 баллов, что гораздо больше среднего показателя для человека. 

При этом технический директор «Яков и партнеры Digital» Федор Чемашкин заявил, что нейросети обучают на «огромном массиве данных», в который входит и информация о тестах IQ. Более того, сам этот тест неоднозначен, так как проверяет в основном логическое мышление и зависит от психоэмоционального состояния проходящего его. Чемашкин отмечает, что итоги теста Лотта были ожидаемы, ИИ со временем будет только лучше проходить такие тесты, так как изучает различные модели логического мышления и не зависит от психоэмоционального состояния. 

Эксперт полагает, что более показательными будут оценки ИИ, основанные на решении нейросетью реальных задач, в том числе из корпоративного сектора, включая оценку способности искусственного интеллекта осмысленно решать такого рода задачи. 

Соавтор исследования «Искусственный интеллект в России — тренды и перспективы» Марина Дорохова в свою очередь уверена, что использование теста IQ как одного из возможных бенчмарков для ИИ может быть интересно. Однако она отметила, что как пользователей, так и компании больше интересует оценка способности нейросети решать прикладные задачи. Кроме того, существует множество вариантов тестов IQ. 

«Способность сети выдать 100-процентный результат на тесте IQ не имеет прямой связи с интеллектом. Машинный и человеческий интеллект — это принципиально разные категории, с разными принципами функционирования», — добавил директор по науке компании «Тридиви» (ГК «Папилон») Алексей Самосюк. 

Интересно, что ИИ уже обошел людей в творческом потенциале. По данным исследования Кента Хьюберта, Ким Авы и Дарьи Забелиной, современный уровень генеративных языковых моделей искусственного интеллекта более креативен, чем человек, в задачах на нестандартное мышление.