ИИ достиг среднего IQ человека

Исследователь попросил известные боты на искусственном интеллекте (ИИ) пройти тест IQ и сравнил результат. 

Для эксперимента был взят IQ-тест от норвежской Mensa, который почти полностью состоит из картинок. Стоит отметить, что все модели завалили его и того исследователю.

«Но я также заметил, читая ответы Chat GPT-4, что он иногда использовал правильную логику, но все равно отвечал неправильно, потому что неправильно читал изображения. Это вызвало вопрос: какая часть его неудачи в тесте была вызвана "плохим мышлением" против просто "плохого зрения"», — написал исследователь.

После теста самый высокий результат показал Claude 3 — 18,5 правильных ответов из 35, а самый низкий результат у Random Guesser — 5,83.Однако есть подозрения, что часть теста могла попасть в обучающий датасет каждой модели, поэтому тест не 100% объективен. А также Copilot от Microsoft «глупее», чем GPT-4, на основе которого его создали.

ИИ уже обошел людей в творческом потенциале. По данным исследования Кента Хьюберта, Ким Авы и Дарьи Забелиной, современный уровень генеративных языковых моделей искусственного интеллекта более креативен, чем человек, в задачах на нестандартное мышление.

Так, нестандартное мышление характеризуется способностью генерировать уникальное решение задачи, не имеющей ожидаемого правильного решения, отмечают авторы исследования. Например, в вопросе по типу «Как лучше всего избежать разговоров о политике с моими родителями?». В ходе исследования GPT-4 давал более оригинальные и продуманные ответы, чем участники-люди.