说一句话就能让机器人帮你干活?!Jacobi.ai 颠覆你对超市服务机器人认知
“具身智能”讨论火热,人类用语音指令控制机器人在大模型的赋能下成为现实。雅可比机器人团队的最新成果展示了最前沿的技术如何在商超零售的场景中得以应用:语音控制机器人补货和拣货。
—— Jacobi.ai 颠覆你对超市服务机器人认知 #
一句话让机器人帮你自动补货
Auto Refilling with Voice Command
—— Auto Refilling Demo #
目前,商超的补货工作需要大量人力精力的堆积性投入。而对于雅可比机器人,商超工作人员只需要口头对机器人说或者通过文字输入“xx货品不够了,需要补货”的需求,团队打造的机器人“大脑”J-Mind就能将抽象的需求和指令进行推理,并拆解成子任务,以及机器人可以执行的动作指令。比如:
“货架上雪碧不够了,请你帮我补一下。”
几秒后,J-Mind就完成了自主推理和拆解任务,自动形成具体的任务指令。
“好的,我去为您补充雪碧。”
THINKING: The user asked me to restock Sprite on the shelf. I should pick up Sprite from the warehouse using the basket and place it on the shelf.
(用户让我补货,我需要从仓库用篮子装取雪碧,再放到货架上。)
ROBOT_SAYS: 好的,我去为您补充雪碧。
ACTIONS:
- NAVIGATE_TO('warehouse')
- PICK_UP('sprite', 'warehouse')
- PLACE_OBJECT_TO('basket_place')
- NAVIGATE_TO('shelf_left')
- PICK_UP('sprite', 'basket_place')
- PLACE_OBJECT_TO('shelf_outer')
团队自研的机器人运动控制小脑J-Box根据行为指令直接对机器人进行控制,无需大量数据进行预训练。在多类货品中,机器人可以精准识别并抓取出用户所需的雪碧。
通过大脑J-Mind和小脑J-Box, 机器人在不经过任何培训(Zero-shot)的情况下可以移动到所需补货的货架前,并与专业零售机器人的货架巡检能力相结合,能够高效的识别货架的陈列状态,把雪碧精准地放到空缺位置中,严格遵守货品与货品之间的距离间隔,从而自动完成货架补货和整理,形成发现问题到解决问题的闭环。
—— 点击视频观看演示全程——
一句话让机器人帮忙拣货
Merchandise Picking Up with Voice Command
—— Merchandise Pick-up Demo #
在电商经济已经成为人们生活常态的时候,线上订单是商超动销的重要来源。拣货工作显得日益重要。同样,工作人员可以直接用语音或文字对机器人下达拣货指令,J-Mind和J-Box能迅速让机器人在超短时间内完成对于拣货需求的自主理解、任务拆解和运动执行。
“请帮我拿一瓶可乐。”
“好的,我这就帮您拿一瓶可乐。”
机器人可以无需培训就找到可乐所在的仓库位置,抓取可乐,递送到工作人员手中,节省了人力需要在仓库和卖场中寻找货品的时间,极大地提高了拣货工作效率。
—— 点击视频观看演示全程——
走在创新前沿的雅可比机器人团队
—— Jacobi.ai #
这样一个有趣而生动的具身智能应用背后是国内新兴的科技创业公司雅可比机器人(Jacobi.ai)。团队致力于结合多模态机器人AI与跨形态运动控制技术,打破机器人场景与形态的边界,让智能机器人走进各行各业、千家万户,把AGI带到物理世界。团队以机器人大脑J-Mind和通用的运动控制小脑J-Box为核心,打造通用机器人技术。
01
J-Mind机器人思考大脑-云端平台
Jacobi.ai打造的机器人大脑J-Mind,模拟人类大脑的学习和理解方式,提升机器人的智能化水平和通用化能力。
J-Mind:结合了LLM和机器人视觉使机器人能在物理世界中不用通过任何训练,即能通过主动观察和语言交互对环境和任务进行推理和拆解,并通过部署在机器人端的动作库控制机器人执行闭环。
类人交互:用户只需要口头对机器人说或者通过文字的输入,J-Mind就能将抽象的需求和指令进行推理,并拆解成子任务,以及机器人可以执行的动作指令。
多场景多任务泛化能力:J-Mind里的场景知识沉淀层J-Layers使机器人能够在不同的场景和任务执行中不断积累专有的知识和经验,实现自我进化。
02
J-Box机器人运动控制小脑-设备
公司自研的机器人运动控制小脑J-Box,适用于所有机器人形态、零代码零训练样本即插即用、大幅降低了机器人的研发成本和部署周期。J-Box通过数学求解+无监督学习的方式可根据行为指令直接对机器人进行控制,此方法不仅可免除传统上需要大量的数据进行预训练,还能解决解释性和迁移能力差的问题。
03
Jacobi.ai 雅可比机器人
Jacobi.ai 雅可比机器人公司由世界顶尖的CMU机器人研究院的团队组建,核心成员不仅在AI和机器人领域有多年的研发实力,还有丰富的行业实战经验。公司成立初期即获得百度前COO、微软和雅虎前总裁、YC中国创始人陆奇博士的投资。
联系我们
hi@jacobi.ai
官网
http://www.jacobi.ai/
加入我们
雅可比研发团队正在招募全职全栈Web开发工程师、运动规划与控制算法工程师、机器学习工程师、机器人测试工程师、市场运营经理,具体职位详情及福利待遇可点击阅读原文查看,欢迎对机器人和AI感兴趣的伙伴投递简历至hr@jacobi.ai
— END —