Появился сайт с результатами IQ-тестов ИИ

Журналист и исследователь Максим Лотт создал сайт под названием Tracking AI. В нем собраны результаты разных IQ‑тестов для ИИ и их ответы на политические вопросы. Это позволяет в режиме реального времени сравнить разные модели между собой.

В работе проекта используются два источника вопросов: уникальный IQ‑тест, созданный самим автором и недоступный в открытом доступе (а значит, не попадавший в датасеты для обучения ИИ), а также официальный онлайн‑тест Mensa. Моделям с возможностью «видеть» скармливались исходные схемы и изображения, тогда как текстовые ИИ получали лишь словесные описания диаграмм.

Лидером в «домашнем» испытании стал GPT-5 Pro с IQ 123. В тесте Mensa победителем оказался GPT-5 Pro (мультимодальный) – IQ 138. Для сравнения: еще недавно мультимодальный GPT-4o показывал всего 65 баллов.

На вторых позициях находится Grok 4 от компании Илона Маска. Он набрал IQ 110 в самодельном тесте и 125 в Mensa. Более того, IQ у разных моделей растет по мере обновлений. Особенно заметен скачок у Claude 3.7 Sonnet Extended и Claude 3.5 Sonnet, которые буквально из месяца в месяц совершенствовались в своих результатах.

Ранее стало известно, что более 370 тысяч переписок с ИИ-чат-ботом Grok были выложены на платформе и проиндексированы поисковиками. Это сделало их доступными для всех пользователей.