RoboSense AC1 : LiDAR à fusion matérielle pour une perception robotique de précision

Imaginez un jour où un Robot Mobile Autonome livre avec grâce vos plats à emporter, colis ou nécessités quotidiennes directement à votre porte. Cette vision, autrefois confinée à la science-fiction, devient rapidement une réalité tangible dans des villes comme Shenzhen, grâce aux progrès de l’IA incarnée et des technologies de Perception Robotique de pointe. RoboSense est à l’avant-garde de cette transformation, exploitant ses solutions avancées de Caméra de Profondeur LiDAR, notamment le RoboSense AC1, pour alimenter la prochaine génération de robots intelligents.

Lors du récent CES, la solution IA incarnée de RoboSense a marqué une étape importante : le premier robot de livraison instantanée au monde a réussi une démonstration complète de livraison du dernier kilomètre. Capturée dans une vidéo nocturne en un seul plan, le Robot Mobile Mobile Autonome a exécuté de manière autonome et fluide près de 20 étapes complexes, montrant une capacité opérationnelle très proche de celle d’un humain. Cette démonstration valide sans équivoque les capacités en boucle fermée de la technologie IA complète de RoboSense dans des scénarios réels.

Présentation du « Robot de Livraison » : opérations entièrement autonomes en plusieurs étapes propulsées par le RoboSense AC1

Le « robot de livraison » présenté, vêtu d’un gilet jaune distinctif, a réalisé une série de tâches complexes avec une précision remarquable : ouvrir une boîte de recyclage pour plats à emporter, récupérer le sac de nourriture, plier habilement la boîte vide, prendre la nourriture, naviguer dans un immeuble de bureaux, appuyer de manière autonome sur le bouton de l’ascenseur, et enfin, livrer l’objet à sa destination. Ces actions, bien que courantes pour les humains, représentent un test ultime pour les capacités complètes et en chaîne d’un robot, exigeant une Perception Robotique supérieure.

Des tâches comme déballer des colis et plier des boîtes nécessitent que le robot interprète avec précision des environnements complexes, localise précisément les objets, décompose les tâches en actions élémentaires, et exécute de manière flexible des opérations finement ajustées respectant les lois physiques. Chaque étape est interconnectée et requiert une coordination précise, soutenue par une Perception Robotique fiable. Par exemple, lors du pliage de la boîte, le Robot Mobile Autonome a utilisé ses capacités avancées de détection pour identifier avec exactitude la position et la forme de la boîte de recyclage pour plats à emporter. Il a clairement saisi son emplacement et a raisonné de manière autonome la logique de la tâche de pliage, planifiant toutes les étapes de préhension, redressement et pliage avec des mouvements fluides et décidés. De même, lors du déballage, le robot a ouvert habilement le couvercle de la boîte, saisi le sac de nourriture et l’a placé dans l’ouverture de recyclage, démontrant un niveau extrêmement élevé de dextérité humaine et une Perception Robotique efficace.

En orchestrant avec succès près de 20 actions difficiles, le Robot Mobile Autonome a réalisé une opération longue distance entièrement autonome avec un taux de réussite impressionnant. Cela répond non seulement aux défis techniques de pointe de l’industrie, mais valide aussi la capacité de la solution technologique de RoboSense à gérer des tâches complexes dans des environnements dynamiques réels, s’appuyant fortement sur les données précises de sa Caméra de Profondeur LiDAR RoboSense AC1.

Des modèles d’IA au matériel central : la base de l’IA incarnée de RoboSense

À l’origine de cette performance longue portée, fluide et précise se trouve le puissant soutien technologique de la solution pionnière IA incarnée de RoboSense. Cette solution complète emploie une technologie IA complète, intégrant une opération de bout en bout, une mobilité de bout en bout, et les capacités robustes de la plateforme IA RoboSense. Cette plateforme comprend des composants essentiels, un entraînement sophistiqué des modèles, des systèmes efficaces de collecte de données, et un volant de données auto-entretenu. De manière cruciale, la solution est équipée de la main habile à haut degré de liberté développée en interne par RoboSense et de la Caméra de Profondeur LiDAR RoboSense AC1, permettant au Robot Mobile Mobile Autonome de fonctionner complètement de manière autonome et d’exécuter des opérations très habiles, flexibles et longues distances avec une Perception Robotique sans égal.

Système double rapide-lent : orchestrer des opérations complexes et finement ajustées

La démonstration vidéo a montré le robot exécutant près de 20 étapes opérationnelles, incluant de nombreuses opérations flexibles et finement ajustées ainsi que des déplacements autonomes dans des environnements ouverts. L’architecture de traitement hiérarchique à double système rapide-lent développée par RoboSense est la clé de cette performance. Le « système lent », responsable de la planification de haut niveau des tâches et de la réflexion sur la prochaine action (l’IA de planification des tâches), travaille de concert avec le « système rapide », qui gère le contrôle en temps réel et l’exécution précise de l’action en cours (un modèle VLA – Vision-Langage-Action). Cette synergie soutient efficacement le Robot Mobile Autonome dans l’accomplissement de tâches complexes et longues distances de bout en bout, la Caméra de Profondeur LiDAR RoboSense AC1 fournissant des données environnementales critiques en temps réel pour les deux systèmes.

Trois technologies clés pour une opération fluide et humaine

Les opérations remarquablement fluides et proches de celles d’un humain du robot résultent directement de trois technologies algorithmiques clés développées par RoboSense :

1. Technologie de contrôle de mode : lors de l’entraînement des modèles, cette technologie résout efficacement le problème d’hésitation et de tremblement opérationnels causés par des modes de données mixtes dans l’apprentissage par imitation, un problème courant comparable aux « hallucinations » dans les grands modèles de langage.
2. Technologie de fusion spatio-temporelle : cette technologie cruciale traite l’asynchronie entre l’inférence du grand modèle et l’exécution robotique, réduisant significativement les hésitations lors des opérations en temps réel. La fusion au niveau matériel de la Caméra de Profondeur LiDAR RoboSense AC1 joue un rôle intégral ici, fournissant des données multimodales parfaitement synchronisées.
3. Technologie d’accélération de l’inférence : grâce à des optimisations telles que les graphes de calcul des opérateurs et la quantification, cette technologie permet au grand modèle VLA d’effectuer des inférences sur le contrôleur de domaine embarqué du robot à une fréquence d’au moins 10 Hz. Cela garantit des réponses rapides et des actions cohérentes du Robot Mobile Autonome.

Grand modèle VTLA-3D : opération précise et stable tout au long du processus

Qu’il s’agisse d’ouvrir, de plier ou de livrer, les opérations du robot exigent une précision extrêmement élevée. Cette capacité découle de la première réussite industrielle de RoboSense : fusionner efficacement la vision et les nuages de points laser dans un modèle VLA. Combiné aux entrées tactiles de la main habile, cela forme le grand modèle opérationnel VTLA (Vision-Toucher-Langage-Action)-3D développé en interne par RoboSense. Grâce à cette riche entrée multimodale, le modèle démontre une performance opérationnelle plus robuste, un taux de réussite plus élevé et une meilleure capacité de généralisation dans des environnements complexes et sous des conditions d’éclairage variables, tirant pleinement parti des détails fournis par la Caméra de Profondeur LiDAR RoboSense AC1.

Système auto-construit de collecte de données multimodales et volant de données

Du côté des données, RoboSense a mis en place un système efficace et de haute qualité de collecte de données multimodales (vision, nuage de points, tactile). Il fusionne intelligemment les données réelles avec des données non incarnées et améliore significativement la qualité des données en exploitant les informations précises des nuages de points 3D. Porté par la quantité et la qualité, ce flux continu de données alimente le système de volant de données auto-développé de RoboSense, favorisant une itération rapide des modèles dans plusieurs scénarios et réalisant un bond en capacités, permettant ainsi la loi d’échelle pour une IA incarnée avancée.

RoboSense AC1 : l’œil mobile pour une perception robotique améliorée

En termes de matériel central, le Robot Mobile Autonome est équipé d’un système complet de la perception à l’exécution. La Caméra de Profondeur LiDAR RoboSense AC1 agit comme le principal « œil du robot ». Installé sur le corps et le dos du robot, le RoboSense AC1 est spécifiquement chargé de la navigation longue portée et de l’évitement robuste des obstacles. Ses capacités sont centrales pour la capacité du robot à se déplacer de manière autonome dans des environnements variés.

Le RoboSense AC1 établit une nouvelle norme pour la Perception Robotique en offrant :

• Fusion au niveau matériel : il intègre de manière unique les données LiDAR de profondeur, couleur RVB et IMU au niveau matériel, fournissant des informations parfaitement synchronisées et alignées spatio-temporellement, cruciales pour la prise de décision en temps réel du Robot Mobile Autonome.
• Précision supérieure : avec une précision de profondeur de 3 cm (1σ), le RoboSense AC1 offre une précision au centimètre près, essentielle pour la cartographie détaillée de l’environnement et la planification précise des trajectoires.
• Portée étendue : une distance maximale de mesure de 70 mètres élargit considérablement l’horizon de perception du robot, lui permettant de « voir » plus loin et d’anticiper les obstacles plus efficacement que les caméras 3D traditionnelles.

• Champ de vision large : son champ de vision fusionné de 120° × 60° assure une couverture complète de la scène, réduisant les angles morts et améliorant la conscience de l’environnement pour le Robot Mobile Autonome.
• Robustesse environnementale inégalée : le RoboSense AC1 fonctionne de manière fiable jusqu’à 100 000 lux en plein soleil direct, garantissant une performance constante en intérieur comme en extérieur dans des conditions difficiles. Cette capacité « tous temps, tous terrains » est vitale pour le déploiement réel.
• Écosystème prêt pour l’IA : soutenu par un SDK open source et une bibliothèque complète d’algorithmes (incluant SLAM, segmentation sémantique, éclatement gaussien 3D), le RoboSense AC1 permet aux développeurs d’intégrer rapidement et d’innover, accélérant le développement d’applications avancées d’IA incarnée.

Le préhenseur est en outre équipé d’une main habile développée en interne avec 8 degrés de liberté, fournissant des signaux tactiles cruciaux pour traiter efficacement les angles morts visuels et assurer la cohérence et la précision opérationnelles. Ces capacités sont également adaptables au matériel personnalisé par l’utilisateur, incluant bras robotiques, préhenseurs, châssis et torse, garantissant une grande polyvalence pour différents designs de Robot Mobile Autonome.

De la livraison instantanée à mille industries : les possibilités infinies de l’IA complète de RoboSense

Cette démonstration vidéo illustre l’accumulation technologique de RoboSense, répondant spécifiquement aux défis des opérations flexibles et finement ajustées dans des scénarios ouverts, du premier au dernier centaine de mètres de la logistique et de la livraison instantanée. Depuis l’établissement de sa stratégie IA incarnée + robotique début 2025, RoboSense a construit une capacité robuste en boucle fermée de technologie IA complète, allant du matériel comme la Caméra de Profondeur LiDAR RoboSense AC1 aux algorithmes sophistiqués. Ses puissantes capacités IA ont déjà conduit au succès, aidant la société robotique Gesong Technology à remporter le championnat du concours de main habile pour robots intelligents de Shenzhen en novembre 2025.

Lors du salon CES 2026, tenu le 6 janvier, le Robot Mobile Autonome « même modèle » a encore démontré ses capacités dans divers scénarios, propulsé par la même solution IA incarnée au stand RoboSense. Dans un scénario généralisé sans collecte ni entraînement préalable, il a accompli de manière autonome une opération longue distance avec un taux de réussite exceptionnellement élevé. Cela incluait des tâches complexes telles que l’emballage cadeau, le rangement, le transport, le déballage, la livraison du cadeau et le pliage de la boîte de recyclage. Il a même distribué des cadeaux du Nouvel An au public, devenant un point fort majeur de l’exposition, porté par sa Perception Robotique avancée et les données fiables du RoboSense AC1.

La démonstration technologique pour la livraison instantanée n’est que le début. À l’avenir, la solution IA incarnée de RoboSense, avec le RoboSense AC1 en son cœur, continuera d’évoluer, explorant la commercialisation dans de nombreux secteurs, y compris la logistique, l’industrie et diverses applications de service, renforçant les capacités de Perception Robotique partout.

Conclusion : RoboSense AC1 – un bond en avant pour la robotique autonome

La Caméra de Profondeur LiDAR RoboSense AC1 franchit fondamentalement les limites des systèmes de vision 3D traditionnels. Avec ses performances remarquables, elle répond efficacement aux besoins exigeants de Perception Robotique des robots intelligents pour une navigation sûre, une cartographie précise et une coordination mobile robuste, tant en intérieur qu’en extérieur. Cela améliore considérablement l’efficacité et la sécurité opérationnelles, donnant vie à une nouvelle génération de plateformes de Robot Mobile Autonome.

RoboSense, grâce à sa technologie LiDAR numérique innovante et à la puissante Caméra Active RoboSense AC1, ne fournit pas seulement des composants ; elle définit la norme de Perception Robotique pour l’industrie de la robotique intelligente. En offrant une solution intégrée fusionnée au niveau matériel, complétée par un écosystème robuste prêt pour l’IA, RoboSense abaisse considérablement les barrières de recherche et développement pour les développeurs créant des systèmes d’IA incarnée. Son rapport qualité-prix et sa facilité d’utilisation démocratisent l’accès à la perception avancée, permettant aux entreprises de toutes tailles de développer rapidement des produits de Robot Mobile Autonome de pointe.

Le RoboSense AC1 marque un tournant décisif dans la vision robotique – passant de « l’imagerie passive » à une véritable « perception active et intelligente ». Il offre une solution robuste aux limites et aux complexités d’intégration des piles de capteurs multi-vision traditionnels. Cela incarne une nouvelle philosophie technologique : l’intégration profonde du matériel et des algorithmes pour renforcer une Perception Robotique qui dépasse véritablement les limites sensorielles humaines, nous propulsant vers un avenir d’intelligence spatiale généralisée. Pour les ingénieurs et développeurs internationaux, le RoboSense AC1, soutenu par son écosystème prêt pour l’IA, transforme le développement d’une lutte avec des outils fondamentaux en un processus fluide favorisant la véritable innovation en IA incarnée. Cela représente une révolution d’efficacité et le début définitif de la prochaine évolution de la technologie des Robots Mobiles Autonomes.
 

Références

1. https://www.robosense.ai/en/rslidar/AC1
2. https://mp.weixin.qq.com/s/Bj0scqBsRlXyEY41KFwZYw?scene=1