《Xsens动捕与人形机器人训练》讲座问题节选

《Xsens动捕与人形机器人训练》讲座问题节选

1、问题：从灵巧手收集的数据是否也会在大脑大模型中训练，或是在专门用于手部控制的单独模型中训练？

答：可以传输Manus手套手指数据。

2、问题：在整个应用链路中除了人形机器人设备外，Xsens是否只提供一套动捕设备？是否拥有一套完整的解决方案以及训练系统？

答：乐动网页版提供运动捕捉系统，数据可以传输到您自己的训练系统。

3、问题：遥操作与动作捕捉之间是何关系，两者是否是同一件事？

答：运动捕捉是捕捉运动（运动）数据，当（数据）实时流传输时，你可以用它来控制机器人。这被称为遥操作。

4、问题：请介绍一下关于XSENS 的用户隐私保护政策？

答：请查看通过电子邮件发送的文件

5、问题：在生产工位将真人操作的动捕关节数据用于人形机器人训练，除了手臂和灵巧手的训练，能否可以把对零件的视觉识别结合起来，例如将头显数据，形成视觉识别输入到关节操作输出的闭环。上述输入、输出关系是否需要通过SDK自己编程实现？

答：是的

6、问题：真人和机器人运动结构有较大差别。如何保证真人的关节数据可直接用于机器人关节控制？能否只能针对单机械臂进行运用，VR应用中因延时导致的用户眩晕问题如何解决？

答：乐动网页版系统的延迟为20ms，这确保了机器人的快速控制。可以是单臂机器人，也可以是全人形机器人。通过关闭运动捕捉系统的头部传感器并使用头戴式显示器的内部IMU数据。