Некоторые голосовые помощники не проходят тест Тьюринга по нескольким причинам:
- Узкая направленность теста. 1 Он проверяет способность ИИ к диалогу, но не оценивает другие аспекты интеллекта: понимание контекста, эмоции, творчество или самосознание. 1
- Искусственные ограничения возможностей бота. 1 Если цель разработчика — создать машину, не отличимую от живого собеседника, то возможности бота приходится искусственно ограничивать. 1 Энциклопедические знания и моментальные ответы выдают ИИ, и алгоритм не проходит проверку. 1
- Шаблонность ответов. 2 Большие языковые модели учатся создавать наиболее вероятные варианты ответов и настраиваются на то, чтобы избегать противоречивых суждений. 2 Эти процессы могут поощрять общие ответы, которые типичны в целом, но лишены особенностей, присущих любому человеку. 2
Например, в исследовании, опубликованном в 2023 году, говорилось, что языковая модель GPT-4 не справляется с логическими головоломками и не способна мыслить абстрактными понятиями. 5
При этом тест Тьюринга считают устаревшим, и учёные разрабатывают альтернативные методы оценки ИИ. 14