首页 > 其他分享 >GelSight和Meta AI合作推出多模态指尖形全向视触觉传感器Digit360

GelSight和Meta AI合作推出多模态指尖形全向视触觉传感器Digit360

时间:2024-11-27 18:03:34浏览次数:8  
标签:Digit AI 形全 GelSight Meta 传感器 触觉 360

近日,触觉智能技术先锋 GelSight 与 Meta AI相关团队今宣布推出 Digit 360,这是一款呈人工指尖形状的触觉传感器,它能够以高精度将触摸数字化,从而提供较为丰富且详细的触觉数据。Digit 360将会拓展触觉传感研究领域,标志着 GelSight 与 Meta 相关团队自 2021 年推出 Digit 触觉传感器以来战略合作关系的新阶段。

Digit 触觉传感器

“Digit 360将推进触摸的数字化,并通过其捕获指尖表面的全向变形的能力解锁机器人技术的新应用。”

马萨诸塞州沃尔瑟姆 – 2024 年 10 月 31 日 – 触觉智能技术领域的先锋 GelSight 与 Meta AI相关团队今日宣布推出 Digit 360,这是一款呈人工指尖形状的触觉传感器,它能够以高精度将触摸数字化,从而提供较为丰富且详细的触觉数据。Digit 360将会拓展触觉传感研究领域,标志着 GelSight 与 Meta 相关团队自 2021 年推出 Digit 触觉传感器以来战略合作关系的新阶段。

Digit 触觉传感器

手指形多模态触觉传感器 Digit 360(右)与我们上一代的触觉传感器 Digit(左)并排显示。

Digit360运用了GelSight 的视触觉传感技术,该技术具备非常高的灵敏度和微米级的分辨率,通过专用光学镜头可以看到人工指尖周围的印记,捕捉到与物体接触表面的更敏感细节。随着时间的推移,研究人员可以使用 Digit 360 来开发 AI,以更好地理解和建模现实世界,包括物体的物理性、人与物体的交互和接触物理学。

触觉传感器 Digit  360

GelSight 基于弹性和成像的触觉传感将触觉数字化,使机器人工程师能够开发用于分析任何表面的解决方案,无论材料类型或反射率如何,均可应对复杂物体操作等诸多灵巧任务。

触觉传感器 Digit  360

Digitizing touch with the artificial multimodal fingertip

Digit 360 是一款指尖形状的全向视触觉传感器,配备了超过 18 种传感功能,是真正的多模态触觉传感器(可以检测空间细节的微小变化,感应力小至 1 mN,几何形状低至 7μm,振动高达 9Khz,热量,甚至气味)。此外,Digit360 具有边缘 AI 功能,可在本地快速处理数据并提供快速运动反应。

Digit 360

“GelSight 和 Meta AI 有着相同的愿景,即让触觉传感更加无处不在和可及,”GelSight首席执行官Youssef Benmokhtar 说。“Digit 360 将推进触摸的数字化,并通过其捕获指尖表面的全向变形的能力解锁机器人技术的新应用。”


除了提升机器人的操作灵活性外,Digit 360这种创新性的传感器还有望在医学、假肢、虚拟现实、远程遥操作等领域得到应用。对于虚拟世界而言,Digit 360 能够帮助更好地构建虚拟与环境交互的基础,以更真实地呈现超出其视觉外观的对象属性。使用 Digit 360 所开发的相关代码和设计将会由 Meta 相关团队以开源的形式提供。

“自 2021 年推出 Digit 和 GelSight 以来,我们观察到每一次触摸交互都具有由表面的机械、几何和化学特性产生的独特特征,”Meta FAIR 研究科学家总监 Jitendra Malik 说。“通过利用多模态信号,Digit 360 可以充当机器人上的周围神经系统,并将帮助科学家推进他们的研究,以构建可以学习更丰富世界模型的 AI。”

标签:Digit,AI,形全,GelSight,Meta,传感器,触觉,360
From: https://blog.csdn.net/cnbestx/article/details/144090752

相关文章

  • Reachy 2,专为AI与机器人实验室打造的卓越开源双臂移动操作平台!
    近期,花粉机器人(POLLENROBOTICS)隆重推出Reachy2仿生机器人——下一代开源操作平台,为AI与机器人实验室带来理想的双臂移动操作科研平台!Reachy2的仿生性:》拥有两个基于Maxon无刷电机的仿生7自由度机械臂和一个独特的3自由度颈部关节。》颈部和手腕采用其patented的Orbita3D......
  • ESP32 TWAI CAN Arduino库驱动小米电机(CyberGear微电机)
    前言鉴于项目要使用小米电机,并且要使用esp32上自带的CAN库来控制,但是没有找到合适的、能用的库,只能从现有STM32小米电机控制库的基础上进行修改。为了方便快速实现,采用Arduino的平台对esp32进行编程,对应需要修改成Arduino的库一、前置任务CAN通信基础ESP32自带CAN控制器—TW......
  • 【AIGC】适合小白的Stable Diffusion教程:图生图
    本文主要分为四部分:\1.图生图原理\2.图生图流程介绍\3.随机种子Seed的应用\4.图生图应用场景今天开始讲解SD的「图生图」功能。你一定看到过下面这样的例子,通过原图通过AI绘画加工成自己想要的图片。在Midjourney中叫「垫图」,而在StableDiffusion中我们叫「......
  • AI 助力汽车电子测试:落地应用的六大挑战
    引言:AI的机遇与挑战 自从ChatGPT横空出世以来,人工智能似乎一夜之间变得无处不在。在日常使用中,我们常常在惊艳与失望之间徘徊:它有时能展现出令人惊叹的能力,洞察深刻、对答如流,有时却又犯下令人哭笑不得的错误。正如ChatGPT官方页面的警示语所说:“ChatGPT也可能会犯错。请......
  • AI大模型的基本概念和国内各种大模型介绍
    我们现在使用的kimi,文心一言,豆包等手机app或网页,即所谓的AI工具,背后都是大语言模型。一、什么是大模型?大模型(LargeModel)是指使用大规模数据和深层神经网络训练出来的人工智能模型。这些模型有数十亿甚至数千亿个参数(类似大脑神经元),通过处理海量数据,学习人类语言、图像、声音等......
  • AI智能检测视频分析网关算法网关汽车生产制造视频监控+AI监管解决方案
    在现代汽车制造业中,随着生产规模的不断扩大和技术的不断进步,传统的监控手段已经难以满足日益增长的生产安全管理需求。为了提升生产效率、保障员工安全、确保产品质量,汽车制造企业正寻求通过智能化手段来实现对生产过程的全面监控和管理。本文将探讨如何通过引入AI视频行为分析系......
  • linux网络启动不成功 systemctl restart networkTob)for network,service failed beca
    一、执行重启网络服务systemctlrestartnetwork然后报错二、执行systemctlstatusnetwork.service查看network服务的运行状态发现是active(exited)退出状态三、使用journalctl-Xe查看systemctl执行命令错误的详细信息发现网卡eth2的配置有问题,无法激活将eth2......
  • AI赋能电商:探索购物推荐、会员分类和商品定价的创新实践
    随着人工智能(AI)技术的高速发展,电商行业逐步迈入智能化时代。从购物推荐到会员分类,再到商品定价,AI在各个环节的创新应用,不仅提升了平台的运营效率,还显著改善了用户体验。那么,AI技术究竟如何改变电商平台的运营方式?以下结合具体案例深入探讨。 AI技术在电商中的创新应用案例1......
  • AI在人力资源-员工关系中的应用详解
    AI在人力资源-员工关系中的应用详解目录员工与企业关系劳动合同智能管理工作环境优化建议员工之间的关系社交网络分析提升团队合作员工互动情绪监控劳动关系管理劳动争议预测与调解建议员工申诉自动分类与分析代码示例与解读示例:自动化意见收集与分类员工与企业......
  • AI在人力资源-组织发展中的应用详解
    AI在人力资源-组织发展中的应用详解目录战略制定AI驱动的市场和竞争分析组织战略模拟与预测结构改进组织网络分析(ONA)优化结构基于AI的职位职责重新设计流程优化业务流程自动化与效率分析流程瓶颈检测与优化建议代码示例与解读示例:组织网络分析(ONA)战略制定AI驱......