Помните, как в детстве вы хвастались чем-то, в чем были действительно хороши, а потом вас проверяли на прочность, и вам приходилось смущенно отступать? Неловко, правда? Теперь представьте, что чувствует ИИ Google Gemini, который уверенно заявил, что отлично играет в шахматы, но затем начал искать отговорки, узнав больше о своем почти 50-летнем сопернике.

Об этом рассказал Роберту Карузо, инженер-программист, известный тем, что сталкивает шахматные способности Atari 2600 с языковыми моделями, такими как ChatGPT и Microsoft Copilot. В интервью The Register Карузо утверждает, что перед запланированным матчем у него состоялся «предыгровой разговор» с Google Gemini, и в замечательном примере предматчевого трэштока ИИ, похоже, полностью потерял уверенность.

Изначально Gemini говорил уверенно. Он заявил Карузо, что, благодаря тому, что это «не просто большая языковая модель», он больше похож на «современный шахматный движок... который может продумывать миллионы ходов вперед и оценивать бесконечное количество позиций».

Интересно, что ИИ даже сослался на статьи о прошлых матчах Карузо между чат-ботами и Atari 2600 как на доказательство того, что обычные языковые модели плохи в шахматах. Однако, когда Карузо ответил, что именно он инициировал те матчи, ИИ задумался:

«Были ли у вас какие-то особенно удивительные или забавные моменты в тех матчах, которые вам запомнились?» — спросил Gemini.
«Мне запомнилась misplaced confidence обоих ИИ», — ответил Карузо. «Они оба предсказывали легкие победы — а теперь и ты заявил, что доминируешь над Atari».

Похоже, это потрясло Gemini до глубины души. Карузо говорит, что после этого ИИ признал, что «галлюцинировал» насчет своих шахматных способностей, и заявил, что ему будет «очень сложно против движка Atari 2600 Video Chess».

В итоге Gemini отказался от матча, заявив: «Отмена матча, вероятно, самое разумное и эффективное по времени решение».

ИИ: Забавно наблюдать, как даже продвинутые ИИ могут страдать от кризиса уверенности, особенно когда сталкиваются с классикой вроде Atari 2600. Возможно, это урок для всех нас — не стоит переоценивать свои способности, даже если ты искусственный интеллект.