Avançar para o conteúdo principal

Como a etiquetagem escalável da fusão de sensores 3D potencia a IA física

Os dados por detrás da inteligência física

Cada veículo autónomo que desvia de um obstáculo, cada robô que se desloca numa fábrica e cada drone de entrega que aterra num alvo em movimento depende de uma coisa: dados etiquetados de alta qualidade. Criar máquinas que compreendam o mundo físico requer mais do que dados brutos. À medida que a IA física se torna mais complexa, o mesmo acontece com o seu pipeline de dados. A robótica e os sistemas autónomos têm de interpretar, em tempo real, as informações provenientes de câmaras, LiDAR, radares, IMU e sensores GPS. É aqui que a etiquetagem da fusão de sensores 3D se torna crucial para a missão.

O desafio da perceção em sistemas físicos de IA

Os sistemas modernos de IA física dependem da perceção multimodal, o que significa ver, detetar e compreender os seus ambientes complexos. Mas os dados brutos que capturam são desordenados. Um exemplo:

  • Nuvens de pontos LiDAR com milhões de pontos por fotograma.


  • Retornos de radar que captam a profundidade e a velocidade, mas não a forma.


  • Transmissões de vídeo de câmaras RGB ou de infravermelhos.


  • Sinais inerciais e de GPS que requerem alinhamento temporal.


Quando estes fluxos de dados estão isolados, as máquinas veem fragmentos desconectados. Reunir estes fluxos num conjunto de dados unificado exige um pipeline de fusão e uma equipa que compreenda a geometria 3D, os sistemas de coordenadas e a calibração de sensores. A etiquetagem da fusão de sensores 3D entrelaça estas entradas díspares numa única realidade tridimensional e coerente.

A importância da etiquetagem da fusão de sensores

A etiquetagem de fusão de sensores combina dados de várias modalidades para criar uma representação mais rica do mundo físico. Estas modalidades incluem LiDAR, radar e vídeo.

Em aplicações de IA física, como robótica e veículos autónomos, isto significa:


  • Maior precisão na deteção de objetos com pouca luminosidade ou em condições meteorológicas adversas.


  • Estimativa melhorada da profundidade e da velocidade.


  • Compreensão mais robusta do cenário através de entradas de sensores validadas de forma cruzada.


  • Menos ângulos mortos e falhas em casos extremos.

Superar obstáculos

A etiquetagem de dados 3D requer ferramentas e conhecimentos especializados:

  • As caixas delimitadoras 3D e a segmentação semântica devem alinhar-se com precisão com as matrizes de calibração dos sensores.


  • A sincronização temporal entre vários sensores garante que os fotogramas representam o mesmo instante.


  • O tratamento de oclusões e o rastreamento de vários fotogramas determinam se um objeto reaparece ou sai de vista.


  • A consistência das anotações e o acordo intra-anotadores (AIA) afetam diretamente o desempenho do modelo.

Devido à complexidade, as empresas podem deparar-se com obstáculos no treino de modelos de perceção, como baixa qualidade, capacidade limitada ou longos prazos de execução,. A utilização de ferramentas e conhecimentos especializados para etiquetar dados 3D é fundamental.

Dos dados brutos à perceção do mundo real

A IA física é tão boa como os dados do mundo real que são recolhidos e rotulados para lhe ensinar a ver e a agir. Ao combinar a tecnologia avançada de rotulagem de sensores com uma rede humana global e estruturas de qualidade rigorosas, a Uber AI Solutions ajuda as empresas a levar a IA física da fase piloto para a fase de produção. Fornecemos sistemas de dados multimodais concebidos para captar toda a gama de condições do mundo real, incluindo as raras e imprevisíveis.

Vamos construir melhor
IA juntos


Fale-nos sobre o seu projeto. Vamos mostrar-lhe
os dados que o ajudam a alcançar o seu objetivo.

Vamos construir melhor
IA juntos


Fale-nos sobre o seu projeto. Vamos mostrar-lhe
os dados que o ajudam a alcançar o seu objetivo.