На выставке IFA Berlin компания XPENG представила свои последние достижения в области физического искусственного интеллекта, которые скоро станут доступны европейским потребителям. Доктор Джон МА, старший директор и руководитель отдела ADAS и Smart Cabin Overseas Delivery в XPENG, выступил с ключевым докладом, посвященным физическому ИИ XPENG и новейшей модели XPENG VLA 2.0 Turing. Он подробно рассказал об ограничениях ИИ в физическом мире, подчеркнув необходимость низкого энергопотребления, минимальной задержки отклика и соответствия нормативным требованиям для обеспечения безопасности. Эти технологии уже внедряются в автомобили XPENG в Китае, включая роботакси, которое сейчас работает в Гуанчжоу, а в следующем году планируется расширение его покрытия.
Инновации в физическом ИИ для безопасности и эффективности
Ключевым элементом недавнего обновления VLA 2.0 версии 6.3.0 является компонент времени. Модель способна анализировать прошлые события, понимать текущие действия и прогнозировать будущие. Infini-VLA помещает бортовое принятие решений во временной контекст для повышения эффективности, используя до 30 секунд исторических данных для экономии вычислительной мощности. На основе этих исторических данных Streaming Inference предвосхищает следующие события, что улучшает время отклика на 300%. Идя дальше, X-Foresight прогнозирует события на следующие 6 секунд, также с ограничением для экономии вычислительной мощности. Затем Flow Matching строит несколько потенциальных решений для выбора оптимальной траектории. Эти технологии уже внедряются в автомобили XPENG в Китае, включая роботакси, которое сейчас работает в Гуанчжоу, а в следующем году планируется расширение его покрытия.
Адаптация технологий для различных платформ и рынков
XPENG в настоящее время предлагает технологию VLA 2.0 на новых моделях с тремя собственными чипами Turing, а также на своих роботакси с четвертым чипом для резервирования. Компания планирует вскоре внедрить технологию VLA 2.0 на одночиповые системы Turing, а затем на предыдущие модели с двумя чипами Orin. XPENG разрабатывает «дистиллированную» версию модели, которая сможет работать с меньшей вычислительной мощностью без потери функциональности. Джон МА отметил, что, хотя могут быть небольшие различия в плавности работы из-за физических ограничений вычислительной мощности, безопасность останется гарантированной. Компания активно собирает отзывы пользователей для дальнейших оптимизаций.
Еще одним важным анонсом в версии 6.3.0 стал голосовой контроль Master Agent для управления функциями автомобиля. Эта система использует очень разговорное голосовое взаимодействие для управления функциями автомобиля, включая интеллектуальное вождение, на автомобилях Ultra с тремя чипами Turing, а также на роботакси. Система поддерживает несколько языков, включая английский, мандаринский и кантонский диалекты, а также другие иностранные языки, такие как французский, немецкий, испанский и итальянский. Ожидаются дополнительные новости и демонстрации на Парижском автосалоне.
Расширение применения физического ИИ за пределы автомобилей
Технология XLLM, способная запускать большую языковую модель ИИ локально на одном чипе, имеет потенциал для применения в самых разных областях. Джон МА подчеркнул, что архитектура VLA 2.0, объединяющая зрение, язык и действия в физическом мире, является основой для их гуманоидных роботов и летающих автомобилей. Это демонстрирует широкий потенциал технологии за пределами автомобильной индустрии. XPENG активно работает над адаптацией своих моделей к европейским условиям дорожного движения, законодательству и пользовательским привычкам, имея зарубежные команды разработчиков, ориентированные на локализацию продуктов для различных рынков.
В отличие от некоторых компаний, которые полагаются на централизованные центры обработки данных и ручную разметку данных для своих ИИ-систем, XPENG осуществляет все принятие решений на борту. Это обеспечивает соответствие нормам конфиденциальности данных и открывает новые возможности для применения ИИ. Джон МА видит в этом следующий большой шаг в развитии физического ИИ, который может изменить повседневную жизнь людей не только через автономные транспортные средства, но и через гуманоидных роботов и летающие автомобили. Гуманоидные роботы являются центральным продуктом XPENG и недавно получили независимые инвестиции, что подчеркивает их значимость в стратегии компании.
Источник: CleanTechnica
