Пропустить и перейти к основному содержимому

Как масштабируемая разметка для объединения данных с 3D-датчиков усиливает физический искусственный интеллект

Данные, лежащие в основе физического интеллекта

Каждое автономное транспортное средство, объезжающее препятствие, каждый робот, перемещающийся по заводскому цеху, и каждый дрон, совершающий доставку на движущуюся цель, зависят от одного — от качественных размеченных данных. Для создания машин, способных понимать физический мир, недостаточно только исходных данных. По мере усложнения физических ИИ усложняется и их поток данных. Робототехническим и автономным системам необходимо в реальном времени обрабатывать информацию с камер, LiDAR, радаров, инерциальных измерительных блоков и GPS-датчиков. Именно здесь разметка данных с использованием 3D-сенсорного слияния становится критически важной.

Проблема восприятия в физических системах искусственного интеллекта

Современные физические системы искусственного интеллекта зависят от многомодального восприятия, то есть от способности видеть, ощущать и понимать сложные окружающие условия. Однако исходные данные, которые они получают, часто бывают неструктурированными. Например:

  • Облака точек LiDAR с миллионами точек в каждом кадре.


  • Радар фиксирует глубину и скорость, но не форму.


  • Видеопотоки с RGB- или инфракрасных камер.


  • Инерциальные и GPS-сигналы, которые требуют временной синхронизации.


Когда эти потоки данных изолированы, для машин они представляют собой разрозненные фрагменты. Объединение этих потоков в единый набор данных требует конвейера слияния и специалистов, разбирающихся в 3D-геометрии, системах координат и калибровке датчиков. Разметка для 3D-сенсорного слияния объединяет эти разнородные входные данные в единую, целостную трёхмерную картину.

Важность разметки для объединения данных с различных датчиков

Система маркировки слияния данных объединяет информацию из нескольких источников, чтобы создать более полное представление физического мира. К таким источникам относятся LiDAR, радар и видео.

В физических приложениях искусственного интеллекта, таких как робототехника и автономные транспортные средства, это означает:


  • Более высокая точность обнаружения объектов при плохом освещении или неблагоприятных погодных условиях.


  • Улучшенная оценка глубины и скорости.


  • Более точное понимание окружающей обстановки благодаря перекрёстной проверке данных с различных датчиков.


  • Меньше слепых зон и сбоев в нестандартных ситуациях.

Преодоление узких мест

Для разметки 3D-данных необходимы специальные инструменты и опыт:

  • 3D-ограничивающие рамки и семантическая сегментация должны точно соответствовать калибровочным матрицам датчиков.


  • Синхронизация времени между несколькими датчиками обеспечивает соответствие кадров одному и тому же моменту времени.


  • Обработка окклюзии и отслеживание на нескольких кадрах определяют, появляется ли объект снова или выходит из поля зрения.


  • Согласованность аннотаций и согласие между аннотаторами (IAA) напрямую влияют на эффективность модели.

Из-за сложности компании могут столкнуться с такими трудностями, как низкое качество, ограниченные возможности или длительное время выполнения при обучении моделей восприятия. Использование специализированных инструментов и экспертизы для разметки 3D-данных имеет решающее значение.

От исходных данных к реальному восприятию

Физический искусственный интеллект настолько хорош, насколько качественны реальные данные, которые собираются и размечаются для его обучения видеть и действовать. Объединяя передовые технологии разметки сенсорных данных с глобальной сетью специалистов и строгими стандартами качества, Uber AI Solutions помогает компаниям внедрять физический искусственный интеллект от пилотных проектов до полноценного использования. Мы предоставляем мультимодальные системы данных, созданные для охвата всего спектра реальных условий, включая редкие и непредсказуемые ситуации.

Давайте вместе создавать более совершенный
AI


Расскажите нам о вашем проекте. Мы покажем вам
данные, которые помогут вам достичь цели.

Давайте вместе создавать более совершенный
AI


Расскажите нам о вашем проекте. Мы покажем вам
данные, которые помогут вам достичь цели.