Как искусственный интеллект реагирует, когда видит оптическую иллюзию?

Эксперименты с оптическими иллюзиями выявили удивительное сходство человеческого восприятия и искусственного интеллекта.

Когда Димитрис Папалиопулос впервые попросил Chet-GPT интерпретировать цвета на изображениях, он думал о «платье», печально известной запутанной оптической иллюзии, которая покорила Интернет в 2015 году.

Папайлиопулос, доцент кафедры компьютерной инженерии в Университете Висконсин-Мэдисон, изучает тип искусственного интеллекта, лежащий в основе таких чат-ботов, как Chat-GPT от OpenAI и Gemini от Google. Его интересовало, как эти модели ИИ могут реагировать на иллюзии, обманывающие человеческий мозг.

Зрительная система человека приспособлена воспринимать объекты как имеющие постоянный диапазон цветов, поэтому мы все равно можем распознавать объекты в различных условиях освещения. Эта адаптация дает нашему мозгу превосходные способы видеть ложные цвета, многие из которых приводят к хорошо известным оптическим иллюзиям.

В серии тестов Папайлиопулос заметил, что GPT-4V (более новая версия Chet-GPT) «поддается» многим из тех же визуальных уловок, которые обманывают людей. Ответы чат-бота часто соответствуют человеческому восприятию. Они не определяют реальный цвет пикселей изображения, а описывают тот самый цвет, который, вероятно, понравился бы человеку.

Это справедливо даже для фотографий, созданных Папайлиопулосом, например, с сашими, которые, несмотря на синий фильтр, все еще выглядят розовыми. Это конкретное изображение является примером так называемой иллюзии постоянства цвета. Ранее оно не публиковалось в Интернете и поэтому не могло быть включено в данные обучения чат-бота с искусственным интеллектом.

Папалиопулос говорит, что удивительные человеческие реакции чат-бота до сих пор не имеют четкого объяснения.