需求人群
ReKep的目标受众是机器人学、自动化和人工智能领域的研究人员和工程师。它适合那些需要开发能够理解和执行复杂操控任务的机器人系统的专业人士。
使用场景
在多阶段任务中,ReKep能够优化机器人的动作以折叠不同类型的衣物。在野外环境中,ReKep使机器人能够适应环境变化,如在操作过程中物体位置的随机变化。ReKep支持双手操控任务,例如同时操作两个机械臂进行复杂的组装任务。
产品特色
使用RGB-D观察和自由形式语言指令生成关键点候选通过DINOv2和GPT-4o生成ReKep约束作为Python程序采用层次优化过程解决机器人动作实时闭环重规划,包括阶段内和阶段间的重规划支持双手操控任务在野外环境中进行操控任务能够为同一任务生成不同的策略
使用教程
11. 准备RGB-D观察和自由形式语言指令。22. 使用DINOv2识别场景中的关键点。33. 将关键点和指令输入GPT-4o生成ReKep约束。