Неординарный шахматный турнир: чат-боты versus Stockfish

Леви Розман организовал шахматный турнир для популярных ИИ, но результаты оказались неожиданными: чат-боты начали игнорировать правила.

📅 Вчера, 20:45 👁️ 46

👤 Андрей Текстов

Фото: forklog

Известный шахматист Леви Розман собрал семь популярных чат-ботов, чтобы протестировать их способности в игре в шахматы. Тем не менее, несмотря на их искусственный интеллект и талант в программировании, справиться с шахматной доской оказалось для них настоящим испытанием.

В этом шахматном турнире противниками ИИ, таких как ChatGPT, Gemini и Grok, стал профессиональный шахматный движок Stockfish. После начала игры стало очевидно, что для многих нейросетей шахматная логика оказалась слишком сложной.

Турнирная таблица. Данные: YouTube-канал Розмана.

Первые матчи: удивительные ошибки нейросетей

Первый матч между Stockfish и Snapchat AI начался многообещающе. Нейросеть показывала неплохие результаты на этапе дебюта, однако вскоре правила игры были проигнорированы — Snapchat AI переместил коня в центр, навязывая свои условия. Чуть позже король соперника съел своего слона, чтобы избежать шаха.

После этого ИИ неожиданно вернул слона на поле, а затем начал двигать пешки вбок.

Игры между нейросетями

Во втором матче встретились Gemini и Grok. В начале обе нейросети действовали в соответствии с правилами, однако вскоре они начали нарушать их: фигуры перемещались на недопустимые клетки. Grok допустил семь ошибок и выставил ферзя под удар, однако его противник Gemini не извлек выгоду из этого.

ChatGPT против Meta AI

В следующем поединке ChatGPT сразился с Meta AI. Чат-бот от OpenAI избрал английский дебют, в то время как его противник действовал логично. Однако вскоре Meta AI начал генерировать случайные ходы и размещать фигуры на запрещенных квадратах. Затем произошел странный момент: Meta AI, похоже, начал "двигать" фигуры ChatGPT.

В ответ на это ChatGPT объявил шах и мат, хотя король противника не находился под реальной угрозой.

Заключительный матч

Игра ChatGPT против Stockfish началась с традиционной атаки пешек и сицилианской защиты. С течением игры нейросеть стала делать бесполезные ходы ферзем и создавать абсурдные формы на доске. Хотя ChatGPT тоже нарушал правила, это не помогло ему одержать победу.

Напоминаем, что в декабре другая ИИ-модель, o1-preview, сжульничала для достижения успеха в шахматах.