近期，，，，，，，z6娱乐中光研发团队融合前沿多模态大模型技术，，，，，，，推出最新2.0版大模型机械臂演示规划。。。。。 。 。新规划搭载公司最新深度相机Gemini 335L和Femto Bolt，，，，，，，可能基于语音指令，，，，，，，自动执行泡茶、插花、滴香薰、播放音乐等一系列复杂工作。。。。。 。 。此前在2023年底，，，，，，，z6娱乐中光成功颁布大模型机械臂1.0，，，，，，，在业界引起宽泛关注。。。。。 。 。
（点击播放视频）
秒懂语音指令，，，，，，，丝滑泡茶、倒茶
z6娱乐中光2.0版大模型机械臂结合多模态大模型技术（语音、文本、视觉）与机械臂节造技术，，，，，，，能够天生空间语义信息，，，，，，，援手机械臂正确鉴别、理解生涯中的常见物体并执行相应作为，，，，，，，可鉴别物体蕴含日常用品、食品和工业零件等。。。。。 。 。
以最具挑战性的泡茶工作为例，，，，，，，其难点在于流程长、步骤多，，，，，，，必要保障作为执行的正确性和多步骤之间的逻辑合理性。。。。。 。 。z6娱乐中光研发团队借助高精度Gemini 335L和Femto Bolt相机实现指标抓取位姿的精确定位，，，，，，，结合大模型的理解能力，，，，，，，经过持久算法优化与仿真环境调试，，，，，，，最终实现对泡茶等复杂工作的理解、规划与自动执杏祝。。。。 。 。
相比1.0版本，，，，，，，2.0版大模型机械臂在以下几个方面实现了升级：
● 说话模型：天然说话处置和理解能力显著提升，，，，，，，机械臂可能更正确理解和执行抽象的说话指令。。。。。 。 。
● 规划能力：复杂工作规划能力显著提升，，，，，，，能够正确理解高阶工作并精准执杏祝。。。。 。 。
● 响应速度：法式整体执行效能优化，，，，，，，工作理解与规划功夫大大缩短。。。。。 。 。
● 抓取能力：升级为夹爪设计，，，，，，，可能正确鉴别和分类分歧物体，，，，，，，适应更多样化的工作和环境。。。。。 。 。
● 感知能力：建设Gemini 335L和Femto Bolt相机，，，，，，，双目3D相机与ToF相机互补，，，，，，，提供更高分辨率和精度的3D视觉感知能力。。。。。 。 。
搭载先进深度相机，，，，，，，感知更精确
z6娱乐中光2.0版大模型机械臂通过搭载公司最新深度相机和AI算法，，，，，，，在鉴别、抓取和操作复杂物体时的精度和效能显著提升。。。。。 。 。相较于1.0版本选取的Gemini 2系列相机，，，，，，，2.0版本的Gemini 335L和Femto Bolt在深度精度和深度齐全性方面拥有更佳阐发，，，，，，，捉拿更精彩的物体细节，，，，，，，可沉建玻璃、亚克力等通明材质物体，，，，，，，从而让机械臂可能精准定位物体，，，，，，，高效执行作为。。。。。 。 。此表，，，，，，，公司基于仿真与现实相结合的调试优化方式，，，，，，，可急剧实现AI算法验证与迭代。。。。。 。 。
z6娱乐中光Gemini 335L相机可沉建香薰玻璃瓶、亚克力支架等通明物体
机械人要想具备更通用的能力，，，，，，，必要理解真实的物理世界。。。。。 。 。作为行业当先的机械人视觉及AI视觉公司，，，，，，，z6娱乐中光持久致力于3D视觉感知技术的研发，，，，，，，以推进具身智能在感知技术层面的进取。。。。。 。 。将来，，，，，，，团队将进一步提升大模型机械臂的理解能力，，，，，，，使其可能处置更多复杂、抽象的工作； ；；；；；；；提升机械臂在复杂或动态变动环境中的泛化能力，，，，，，，并加强人机交互与机械自我进建能力，，，，，，，加快其在生涯服务、工业出产等现实场景中的落地利用。。。。。 。 。
分享到
