Тест Тьюринга на компьютерную разумность нуждается в пересмотре

Является ли известный Тест Тьюринга действительно столь адекватным мерилом компьютерного интеллекта, как считалось прежде? Сомнения в этом появились у многих, когда программа Eugene Goostman в ходе 5-минутного общения с командой экспертов смогла выдать себя за человека в 33 случаях из 100.

Ее успех, по мнению Андерса Сандберга (Anders Sandberg) из Оксфордского университета, больше говорит не об уме машин, а о неумении людей его определять путем общения. Тест Тьюринга показывает способность компьютера кратковременно вводить людей (не всех, но больше, чем можно было бы ожидать) в заблуждение о своей сущности, используя уклончивые и саркастические ответы, считает Гэри Маркус (Gary Marcus), профессор когнитологии из Нью-Йоркского университета.

Эти и подобные им мнения привели к рождению проекта испытаний альтернативного теста Winograd Schema Challenge. Его условия действительны в течение года, до 1 октября 2015 г. Программе, которая в течение этого времени пройдет предложенный тест, будет присуждена премия 25 тыс. долл.

В основу теста, подготовленного Гектором Левеском (Hector Levesque), профессором информатики Университета Торонто, положены идеи Терри Винограда (Terry Winograd), получившего известность за разработку принципов построения системы искусственного интеллекта для распознавания естественной речи.

Конкурс осуществляется при поддержке разработчика голосового ПО — компании Nuance Communications и исследовательской группы Commonsense Reasoning.

Вместо свободного обмена короткими фразами, характерного для теста Тьюринга, схема Винограда построена на вопроснике с несколькими вариантами ответов. Примеры вопросов предоставляются потенциальным участникам на сайте конкурса.

Итоги состязания, как считает исследователь из Nuance Чарльз Ортис (Charles Ortiz), положат начало более систематическим разработкам, что позволит раздвинуть современные границы ИИ и приведет к появлению более «умных» персональных помощников и интеллектуальных систем.