Construire une éco - intelligence tactile complète, de la perception tactile à l'acquisition de données en passant par l'intelligence personnelle
Le robot kilosensoriel dévoile officiellement le premier modèle tactile vtla, le X - touchmind v1, ainsi que tacverse 1K, le premier ensemble de données multimodales sur le corps tactile et optique pour des interactions physiques réelles.
Cette annonce marque l'achèvement de la construction écologique technique complète du robot haptique, du système matériel haptique, du système d'acquisition de données aux actifs de données et aux modèles personnels, afin de faire progresser l'évolution de l'intelligence tactile de la capacité de perception à la capacité d'intelligence Robotique.
01 le prochain niveau d'intelligence corporelle: du post - complément modal au natif tactile
Alors que les robots se dirigent vers des applications du monde réel, il est déjà difficile de répondre aux exigences de tâches complexes en s'appuyant uniquement sur la technologie visuelle. Mais les informations tactiles post - complémentées, qui doivent souvent passer par des chemins épissés pour être intégrées dans les modèles de personnalité existants, limitent la limite supérieure de la capacité d'interaction physique.
Face à ce point d'ancrage industriel, qianshi estime que le toucher est une modalité clé pour que les robots entrent vraiment dans le monde physique et qu'il doit être construit en pile complète autour de scénarios de contact réel et intense, basés sur une écologie Native.
Cela permet aux robots non seulement de percevoir le monde, mais aussi de comprendre et d'accomplir de manière stable des tâches physiques complexes.
02 X - touchmind V1: le premier modèle tactile vtla pour mille sens
X - touchmind V1 est un modèle tactile vtla basé sur la formation de données multimodales Opto - tactiles.
X - touchmind V1 se concentre davantage sur l'état physique après le contact, en modélisant de manière unifiée la vision, le langage, le toucher, l'action et l'état de l'ontologie robotique, permettant une modélisation Collaborative allant de la compréhension des tâches à la génération d'actions en passant par le contrôle de la rétroaction du contact.
Le modèle utilise une architecture hiérarchique correspondant à différents niveaux de fonctionnement du robot réel:
Système 2: couche de compréhension des tâches et de raisonnement sémantique, responsable de la compréhension de l'environnement, des objectifs des tâches et des instructions linguistiques, répondant à la question « que faire».
Système 1: génération d'actions et couche de planification de trajectoire qui génère des trajectoires d'action en fonction de la vision, de la sémantique de la tâche et de l'état du robot, répondant à la question « comment faire».
Système 0: couche de contrôle de l'interaction haptique - ontologique, correction à haute fréquence avec rétroaction haptique et ontologique dans un contact réel, réponse à la question "que faire après le contact stable, quasi".
Grâce à cette architecture, le X - touchmind V1 est non seulement capable de générer des séquences d'actions, mais aussi de comprendre la stabilité du glissement, de la contrainte, de la déformation, de la texture et du contact en fonctionnement réel, et de modifier dynamiquement les actions, améliorant ainsi la stabilité du robot dans des tâches telles que les opérations délicates, la manipulation flexible de matériaux et le contrôle de qualité intelligent.
Conçu pour les tâches contact Rich Rich Rich telles que la déconnexion, l'extraction, le sertissage, l'enfichage, le contrepoint, la récupération, l'objectif de X - touchmind V1 n'est pas de permettre au robot d'effectuer une démonstration d'action, mais de le rendre stable, fiable et sans perte dans des interactions physiques complexes.
03tacverse 1K: le premier ensemble de données multimodales sur corps tactile optique de haute qualité de 1 000 heures
Publié en synchronisation avec X - touchmind v1, tacverse 1K est le premier ensemble de données multimodales sur corps tactiles de haute qualité de 1000 heures conçu pour les interactions physiques réelles.
Du côté de l'acquisition de données, tacverse 1K s'appuie sur un système matériel d'acquisition autonome pour découpler la production de données de l'ontologie du robot, permettant le découplage de la capacité, le découplage de la scène et le multiplexage de l'ontologie. Sur la base de ce système, les coûts d'acquisition de données peuvent être réduits de plus de 80% et l'efficacité multipliée par 3 à 5, fournissant une base pour la précipitation de données interactives réelles à grande échelle.
Du côté de la qualité des données, Chitose Self - Research xtacflow est responsable des liens d'acquisition de planification unifiée, prend en charge l'accès unifié Multi - périphériques, l'alignement du temps intermodal à l'échelle de la milliseconde et automatise plus de 90% de la retransmission et du post - traitement des données, transformant les données brutes multimodales en échantillons de données et en ressources de formation pouvant être formés, traçables et multiplexés.
La structure de données tacverse 1K est compatible nativement avec les principaux formats de données robotiques tels que lerobot, mcap, hdf5, ros2, et standardise les champs d'extension modaux tactiles pour que les données ne soient pas seulement disponibles en interne, mais aussi pour le partage, le multiplexage et la mise en relation avec l'industrie.
Selon le plan de lancement, les premiers ensembles de données de 100 heures de tacverse 1K seront ouverts aux candidatures le 30 juillet, couvrant plus de 40 scénarios réels; Les demandes d'ensembles de données de 1 000 heures seront ouvertes par lots à partir d'août et la coopération ouverte sera promue via des plateformes telles que Ali Magic Tower, hugging face et bien d'autres.
Orienté vers les tâches industrielles réelles, propulse l'intelligence physique à l'échelle
Le lancement simultané du X - touchmind V1 et du tacverse 1K marque le début officiel d'une nouvelle phase dans l'industrie.
La prochaine qiansu se concentrera sur la coopération approfondie de l'industrie dans plusieurs domaines pour l'assemblage de précision industrielle, l'assemblage d'électronique grand public, la logistique flexible, l'inspection intelligente de la qualité, la qualification de l'authenticité des produits de consommation, la construction de centres de données et d'autres scénarios.
« Nous espérons que les lancements de X - touchmind V1 et tacverse 1K continueront d’apporter de la valeur à l’industrie, ouvrant ainsi une nouvelle phase de développement de l’industrie « tactile Native ». « et
À l'avenir, les mille sens continueront à faire progresser l'itération technologique et l'exploration théorique autour du « natif tactile» et de la « scène réelle», en collaboration avec l'industrie.
Titre original: lancement de Heavy Books | thousand sense Robotics lance le premier modèle tactile vtla X - touchmind V1 avec les premiers ensembles de données multimodales Opto - tactiles tacverse 1K