Американський інженер передав чотирьом моделям штучного інтелекту керування справжньою Toyota Corolla. Більшість учасників експерименту зійшли з маршруту майже одразу, а найуспішніша нейромережа змогла фінішувати лише з другої спроби.
Про це пише DrivingBench.
Для випробування обрали дві версії ChatGPT, а також моделі Claude та Grok. Автомобіль рухався порожньою парковкою, тому інженер міг перевірити поведінку нейромереж без виїзду на дороги загального користування.
Штучний інтелект отримав прямий доступ до систем кермування, дросельної заслінки та гальм Toyota Corolla. Камери передавали інформацію про простір навколо машини, яку система додавала до запитів для нейромереж.
У відповідь моделі надсилали текстові команди з потрібним кутом повороту керма, відсотком відкриття дросельної заслінки та силою натискання на гальма. Після цього обладнання виконувало отримані вказівки.
Звичайні мовні моделі не створювали для керування транспортними засобами. Вони не здатні так само швидко, як спеціалізовані автомобільні системи, аналізувати навколишнє середовище та ухвалювати рішення за частки секунди.
Саме затримка реакції стала головною проблемою експерименту. Поки нейромережа визначала, що кермо потрібно повернути на 15 градусів, автомобіль уже встигав суттєво відхилитися від заданого курсу.
Штучний інтелект також погано оцінював відстань до перешкод через відсутність повноцінного тривимірного сприйняття простору. Це заважало моделям своєчасно гальмувати та правильно вибирати траєкторію руху.
Деякі команди виявилися суперечливими. Нейромережа могла одночасно наказати системі використати 100% потужності двигуна та застосувати максимальне гальмування.
Найкращий результат показала модель GPT-6 Astra. Вона точніше за конкурентів керувала автомобілем, хоча також реагувала із запізненням і не змогла пройти маршрут із першої спроби.
Grok ухвалював рішення значно швидше, але його маневри виявилися недостатньо точними та безпечними. Claude добре помічав можливі загрози, однак надто довго вагався перед виконанням дій.
Переможцем випробування стала GPT-6 Astra, яка після першої невдачі врахувала допущені помилки й подолала весь маршрут за 5 хвилин 22 секунди. Claude Fable 5.1 проїхала 45% дистанції, Grok 4.6 зупинився на позначці 11%, а GPT-5.6 Sol зміг подолати лише 6% маршруту.
