ChatGPT поможет автономным автомобилям лучше понимать пассажиров

Инженеры Университета Пурдю разработали систему, благодаря которой автономное транспортное средство может эффективно и быстро доставить вас в нужное место. Система основана на искусственном интеллекте и больших языковых моделях, таких как ChatGPT.

Это исследование будет представлено на 27-й Международной конференции IEEE по интеллектуальным транспортным системам 25 сентября.

Доцент Школы гражданского и промышленного строительства Пурдю Зиран Ванг считает, что для полной автономности автомобилям необходимо понимать все команды пассажиров, даже невысказанные. Например, водитель такси будет знать, что вы спешите, без необходимости указывать маршрут.

Современные автомобили оснащены функциями общения с человеком, но требуют более чётких формулировок. Большие языковые модели могут интерпретировать запросы и отвечать в более естественной манере, поскольку они обучены на больших объёмах текстовых данных и продолжают обучаться.

Ванг говорит, что обычные системы в автомобилях требуют нажатия кнопок или чёткой речи, а языковые модели могут более естественно понимать разные запросы.

Проведение исследования нового типа

В этом исследовании большие языковые модели не управляли автомобилем, а помогали в управлении с помощью существующих функций.

Перед началом экспериментов исследователи обучили ChatGPT с помощью различных команд: от прямых ( «Пожалуйста, езжайте быстрее») до косвенных („Меня сейчас немного укачивает“). По мере обучения ChatGPT исследователи задавали моделям параметры, требуя учитывать правила дорожного движения, дорожные условия, погоду и другую информацию, которую собирали датчики автомобиля.

Исследователи сделали большие языковые модели доступными через облако для экспериментального автомобиля с автономностью 4 уровня по классификации SAE International. Это всего лишь один уровень до полностью автономного автомобиля.

Когда система распознавания речи в ходе экспериментов получала команду от пассажира, языковые модели обрабатывали её с учётом заданных исследователями параметров и генерировали инструкции для системы drive-by-wire автомобиля. Эта система связана с дроссельной заслонкой, тормозами, передачами и рулевым управлением и отвечает за вождение в соответствии с командами.

Команда Ванга тестировала модуль памяти, который позволял большим языковым моделям учитывать исторические предпочтения пассажира.

Большинство экспериментов исследователи провели на полигоне в Колумбусе (штат Индиана), который раньше был взлетно-посадочной полосой аэропорта. Это позволило безопасно проверить реакцию автомобиля на команды при движении по полосе и прохождении перекрестков, а также парковку на стадионе Росс-Аде в Пурдю.

Во время поездки в автомобиле участники исследования использовали как знакомые команды для больших языковых моделей, так и новые.

После поездки участники опроса выразили меньший дискомфорт по поводу решений, принятых автопилотом, по сравнению с обычными ощущениями от поездки на авто без помощи больших языковых моделей.

Команда также сравнила показатели автопилота с базовыми значениями, которые определяют комфортную и безопасную поездку. Например, это время реакции автомобиля, чтобы избежать столкновения сзади, и скорость разгона и торможения. Исследователи выяснили, что даже при ответе на незнакомые команды, автопилот превзошёл все базовые значения.

Будущие направления

По словам Ванга, большие языковые модели обрабатывали команду пассажира в среднем за 1,6 секунды. Это приемлемо для некритичных по времени сценариев, но должно быть улучшено для срочных ситуаций. Проблема затрагивает большие языковые модели в целом, и над ней работают как промышленники, так и учёные.

ChatGPT и другие большие языковые модели могут ошибаться, поэтому их нельзя использовать в некоторых сферах.

В исследовании Ванга был отказоустойчивый механизм, который позволял безопасно продолжать движение при неправильном понимании моделью команд. Хотя модели улучшали своё понимание во время поездки, проблема с «галлюцинациями» остаётся открытой. Её нужно решить, прежде чем большие языковые модели можно будет использовать в транспортных средствах.

Производители транспортных средств должны провести больше испытаний с использованием больших языковых моделей.

Для интеграции этих моделей в систему управления автомобилем потребуется разрешение регулирующих органов, — говорит Ванг.

Ванг и его студенты продолжают эксперименты, которые помогут изучить возможность использования больших языковых моделей в автомобилях.

После тестирования ChatGPT исследователи оценили другие публичные и частные чат-боты на основе больших языковых моделей, такие как Gemini от Google и серию ИИ-помощников Llama от Meta. На данный момент ChatGPT показал наилучшие результаты по безопасной и экономичной поездке в автомобиле.

Теперь предстоит выяснить, могут ли большие языковые модели разных автобрендов (АВ) общаться между собой. Например, чтобы решить, кто должен ехать первым на перекрёстке.

Лаборатория Ванга также изучает использование больших моделей зрения для управления автомобилями в экстремальных зимних условиях Среднего Запада. Эти модели похожи на большие языковые, но обучаются на изображениях, а не на тексте.

16.09.2024


Подписаться в Telegram



Транспорт

Новая система расширяет возможности беспилотных автомобилей
Новая система расширяет возможности беспилотных автомобилей

Беспилотные автомобили больше не далекая ...

9 из 10 новых автомобилей в Норвегии — полностью электрические
9 из 10 новых автомобилей в Норвегии — полностью электрические

Норвегия стоит на пороге того, чтобы стат...

Вертолеты-«косатки» Ми-8МТВ-1 совершили перелет в 6300 км
Вертолеты-«косатки» Ми-8МТВ-1 совершили перелет в 6300 км

Два вертолета Ми-8МТВ-1 перелетели из Каз...

NE: Батареи для электромобилей могут прослужить на 40% дольше, чем ожидалось
NE: Батареи для электромобилей могут прослужить на 40% дольше, чем ожидалось

Аккумуляторы электромобилей, подвергающихся об...

В Пензе разработали бионический подводный дрон
В Пензе разработали бионический подводный дрон

Новый подводный аппарат разработали в Пен...

В ОЭЗ «Алабуга» для перевозки грузов запустили роботы-грузовики
В ОЭЗ «Алабуга» для перевозки грузов запустили роботы-грузовики

6 автономных грузовых электрокаров Evocargo N1...

В НовГУ придумали, как сканировать дефекты дорожного полотна
В НовГУ придумали, как сканировать дефекты дорожного полотна

В лаборатории беспилотных систем и цифров...

Ростех поставил новые вертолеты Ми-8МТВ-1 в российские регионы
Ростех поставил новые вертолеты Ми-8МТВ-1 в российские регионы

Холдинг Вертолеты России передал Государственн...

Communications of the ACM: Беспилотные авто Tesla можно сделать дешевле
Communications of the ACM: Беспилотные авто Tesla можно сделать дешевле

К 2025 году на дорогах появятся миллионы ...

На ДЭФ показали макет экологичного водородного поезда
На ДЭФ показали макет экологичного водородного поезда

В Южно-Сахалинске стартовал Дальневосточный эн...

Одной бедой меньше: в МФТИ создадут новый способ проверки качества дорог
Одной бедой меньше: в МФТИ создадут новый способ проверки качества дорог

Сотрудники отдела радиофотоники МФТИ создали т...

ChatGPT поможет автономным автомобилям лучше понимать пассажиров
ChatGPT поможет автономным автомобилям лучше понимать пассажиров

Инженеры Университета Пурдю разработали систем...

Поиск на сайте

Знатоки клуба инноваций


ТОП - Новости мира, инновации

Воздух, который делает нас глупее: что наука знает о влиянии загрязнения на мозг
Воздух, который делает нас глупее: что наука знает о влиянии загрязнения на мозг
Нейросети будущего: поляритоны в СПбГУ бьют рекорды точности
Нейросети будущего: поляритоны в СПбГУ бьют рекорды точности
Океан Энцелада: жизнь может быть ближе, чем мы думаем, но скрыта от нас
Океан Энцелада: жизнь может быть ближе, чем мы думаем, но скрыта от нас
Гены в режиме ожидания: как клетки решают, кем стать
Гены в режиме ожидания: как клетки решают, кем стать
Жизнь в капле: ученые раскрыли секрет древних протоклеток
Жизнь в капле: ученые раскрыли секрет древних протоклеток
Эволюция в действии: почему одни мушки побеждают вирусы, а другие нет
Эволюция в действии: почему одни мушки побеждают вирусы, а другие нет
Микробы в космосе: как L-серин поможет найти жизнь на Марсе
Микробы в космосе: как L-серин поможет найти жизнь на Марсе
Новый ключ к лечению аритмии: сделано открытие, которое изменит кардиологию
Новый ключ к лечению аритмии: сделано открытие, которое изменит кардиологию
Световая атака: как зеленый свет помогает бороться с коронавирусом и энцефалитом
Световая атака: как зеленый свет помогает бороться с коронавирусом и энцефалитом
23 мышцы, которые меняют все: создана новая модель для лечения боли
23 мышцы, которые меняют все: создана новая модель для лечения боли
Молодые умы и большие деньги: Татарстан выделяет 250 млн рублей на инновации
Молодые умы и большие деньги: Татарстан выделяет 250 млн рублей на инновации
ИИ, которому можно доверять: ACHILLES объединяет технологии, этику и экологию
ИИ, которому можно доверять: ACHILLES объединяет технологии, этику и экологию
700 000 участниц, 11 миллионов фунтов и шанс победить рак
700 000 участниц, 11 миллионов фунтов и шанс победить рак
Блины с пользой: ученые превратили вредный завтрак в суперфуд
Блины с пользой: ученые превратили вредный завтрак в суперфуд
Квантовый щит: физика меняет правила игры в цифровой безопасности
Квантовый щит: физика меняет правила игры в цифровой безопасности

Новости компаний, релизы

На Фестивале «Москва — Точка старта» победили проекты из МИФИ
ХимБиоПлюс — шанс для школьников всей России
Правительство Республики Казахстан пригласило МИФИ войти в совет по стратегическому партнерству в науке и образовании
Нижегородский ЗГМ провел испытания разработанных по нацпроекту радиопоглощающих материалов
МФТИ подготовил более 140 специалистов в области синхротронных и нейтронных исследований