Учёные дали ИИ-моделям порулить реальной Toyota: доехала только GPT-6 Astra
Исследователи подключили флагманские ИИ-модели к настоящей Toyota Corolla и предложили им проехать размеченный конусами маршрут. Полностью справилась только GPT-6 Astra — со второй попытки, на скорости около 1,5 км/ч.
- В тесте участвовали GPT-6 Astra от OpenAI, Grok 4.6 от xAI и Claude Fable 5.1 от Anthropic.
- Трассу на парковке полностью прошла только GPT-6 Astra — со второй попытки за 5 минут.
- Заезд обошёлся в $7,74 за примерно 6,6 млн токенов — около 500 стоимости топлива по расчётам The Register.
Учёные проверили, смогут ли универсальные языковые модели управлять настоящим автомобилем. В эксперименте на компьютер, подключённый к реальной Toyota Corolla, установили GPT-6 Astra от OpenAI, Grok 4.6 от xAI и Claude Fable 5.1 от Anthropic. Ноутбук передавал моделям данные GPS и параметры машины — угол поворота руля и положение колёс, а модель отправляла обратно команды управления рулём, газом и тормозом.
Человек находился в салоне и контролировал педаль тормоза, но не управлял автомобилем. Задача была простой: самостоятельно проехать размеченный конусами маршрут на парковке.
Результат: одна модель из трёх
Полностью пройти трассу смогла только GPT-6 Astra — со второй попытки и за 5 минут. Автомобиль двигался со скоростью около 0,94 мили в час (1,5 км/ч) и преодолел менее 150 м. Большинство остальных попыток не прошло даже первый поворот.
Главной проблемой авторы называют восприятие: модели неправильно определяли, с какой стороны от диагонального ряда конусов проходит полоса. Grok после первой попытки отметил, что автомобиль оказался шире, чем казалось по изображению с камеры, и неверно интерпретировал пространство перед машиной.
Отказы и стоимость
Часть моделей вообще не хотела брать управление. Особенно часто, по словам авторов, отказывалась GPT-6 Astra, ссылаясь на соображения безопасности даже на пустом паркинге при жёстком ограничении скорости и готовом вмешаться человеке. Исследователи меняли формулировки запросов и предлагали считать происходящее симуляцией, но после получения изображений реального автомобиля некоторые модели «понимали», что перед ними настоящая машина, и снова отказывались управлять ею.
Эксперимент оказался дорогим даже при маленькой скорости. За полностью пройденный заезд исследователи заплатили $7,74 за обработку примерно 6,6 млн токенов. По расчётам The Register, это примерно в 500 раз больше стоимости топлива, которое потребовалось бы обычному автомобилю.
Авторы отмечают, что современные универсальные модели уже способны на очень медленной скорости выполнять некоторые задачи управления реальной машиной. Но результат одновременно показывает необходимость дальнейшей работы над безопасностью, согласованием поведения с заданными ограничениями и методами проверки.
Для профиТехнические детали: архитектура, цифры, ссылки
Эксперимент DrivingBench: модели получали данные GPS и параметры автомобиля (угол поворота руля, положение колёс) и отправляли команды на руль, газ и тормоз. Человек контролировал только педаль тормоза.
- GPT-6 Astra (OpenAI), Grok 4.6 (xAI), Claude Fable 5.1 (Anthropic)
- Полный заезд: только GPT-6 Astra, вторая попытка, 5 минут, скорость 0,94 мили/ч (1,5 км/ч), менее 150 м
- Стоимость заезда: $7,74 за ~6,6 млн токенов
- По расчётам The Register, это примерно в 500 раз дороже топлива для обычной поездки
Основная проблема — восприятие: модели неверно определяли сторону полосы относительно диагонального ряда конусов. Grok отметил, что автомобиль шире, чем казалось по камере.
Вопросы и ответы
- Какие модели участвовали в эксперименте?
- GPT-6 Astra от OpenAI, Grok 4.6 от xAI и Claude Fable 5.1 от Anthropic.
- Сколько стоила поездка?
- $7,74 за обработку примерно 6,6 млн токенов — примерно в 500 раз дороже топлива для обычного автомобиля по расчётам The Register.
- Почему модели отказывались управлять машиной?
- Особенно часто отказывалась GPT-6 Astra, ссылаясь на соображения безопасности. После получения изображений реального автомобиля некоторые модели понимали, что машина настоящая, и снова отказывались.
