Пятидесятилетний чат-бот превзошел GPT-3.5 в тесте Тьюринга
Американские специалисты из Калифорнийского университета в Сан-Диего разработали онлайн-версию этого теста, в рамках которой решили выяснить, кто лучше сможет притворяться человеком: созданный в 1966 году чат-бот Элиза, пародирующий психоанализ, или современный GPT -4 и GPT -3,5.
Отмечается, что в 63% случаев испытуемые идентифицировали в качестве собеседников людей, а в 37% случаев принимали их за ИИ. Чат-ботам GPT-4 и GPT-3.5 удалось выдать себя за человека в 41% и 14% случаев, а «Элизе» неожиданно удалось это сделать в 27% случаев, что почти в два раза больше, чем у GPT-3.5.
Успех древней модели объясняется тем, что ее ответы были очень консервативны и создавали иллюзию «несогласного собеседника». Кроме того, она не отличалась дружелюбием и многословием, присущими современным моделям, а некоторые из испытуемых сочли чат-бот слишком плохим, чтобы быть моделью ИИ, поэтому приняли его за человека.
