Какая компьютерная программа 1960-х годов обошла чат-бот ChatGPT в исследовании

ELIZA превзошла современный ИИ в исследовании, которое один из исследователей назвал "позорным" для OpenAI

Ранняя компьютерная программа, созданная в 1960-х годах, победила вирусный ИИ чат бот ChatGPT в тесте Тьюринга, призванном отличить человека от искусственного интеллекта.

Исследователи из Калифорнийского университета в Сан-Диего (США) протестировали ранний чат-бот ELIZA, созданный в середине 1960-х годов ученым из Массачусетского технологического института Джозефом Вейценбаумом, в сравнении с современными версиями технологии.

Они обнаружили, что ELIZA превзошла ИИ GPT-3.5 от OpenAI, на котором основана бесплатная версия ChatGPT.

Тест Тьюринга является эталоном для определения способности машины имитировать человеческий разговор с тех пор, как он был впервые задуман в 1950 году британским компьютерщиком Аланом Тьюрингом.

В последнем исследовании 652 человека должны были определить, с кем они разговаривают по Интернету - с человеком или с чат-ботом с искусственным интеллектом.

Чат бот GPT-4 от OpenAI, который является более мощным, чем бесплатная версия технологии, смог обмануть участников исследования чаще, чем ELIZA, с показателем успеха 41 процент.

ELIZA смогла выдать себя за человека в 27 процентах случаев, в то время как у GPT-3.5 этот показатель составил всего 14 процентов.

Эксперт по искусственному интеллекту Гэри Маркус назвал успех ELIZA "позором" для современных технологических компаний, работающих над чат-ботом, однако другие ученые утверждают, что ChatGPT не был создан для успешного прохождения теста Тьюринга.

"Я думаю, что тот факт, что GPT-3.5 проиграл ELIZA, не так уж удивителен, если прочитать статью"

— написал на сайте X (бывший Twitter) Итан Моллик, профессор ИИ в Уортонской школе в США.

"OpenAI считает риск самозванства реальной проблемой и использует для того, чтобы ChatGPT не пытался выдать себя за человека. ELIZA в значительной степени создана для того, чтобы выдавать себя за человека, используя нашу психологию".

Одной из причин, по которой участники исследования приняли ELIZA за человека, было то, что она "слишком плоха", чтобы быть текущей моделью ИИ, и поэтому "более вероятно, что это человек, намеренно не желающий сотрудничать".