奥比中光携机器人深度相机亮相VALSE 2022,引领机器人、元宇宙创新应用开发
时间:2024-03-29 09:50 浏览量:759 

2022年8月22日-24日,VALSE 2022大会正在天津国度会展中心正式举行。奥比中光作为金牌赞助商,以「见」机而行,「视」没有可挡为主题亮相,凭仗六足仿生机器人JetHexa、高精度三维人脸重修体系、三维视觉正在线课程等产物及内容,展现3D视觉感知正在机器人、元宇宙等行业的立异利用潜能,让与会者一览3D数字化天下的出色。

六足仿生机器人燃爆现场

8月22日上午,六足仿生机器人JetHexa正在VALSE 2022奥比中光展位亮相,凭仗酷炫的表面取3D视觉“慧眼”成为了现场核心,吸引浩瀚青年人学子取开发者交换体验。JetHexa搭载了奥比中光DaBai DCW深度相机和NVIDIA Jetson Nano、激光雷达等硬件,可实现精准的建图导航、静态躲障、途径计划、体感交互。

六足仿生机器人JetHexa成为VALSE现场核心

3D视觉感知交互本领是机器人的“眼睛”。奥比中光的3D视觉传感器能够赞助机器人高效完成人脸辨认、间隔感知、躲障、导航等功能。奥比中光此次还展出了Orbbot S1移动机器人、Orbbot Arm桌面机器臂体系等机器人开辟相干套件,助力开辟者打造机器人3D视觉利用。

奥比中光展位吸引浩繁学子围观

顶会论文分享:连系单目构造光和双目立体视觉的深度估量

8月23日下昼,正在VALSE大会Workshop上,奥比中光研究院三维重建组负责人缓玉华博士以《消耗级深度相机取利用》为题揭晓演讲,并分享其团队CVPR 2022论文结果《融合单目布局光和双目立体视觉的深度预计》(Depth Estimation by Combining Binocular Stereo and Monocular Structured-Light)。

奥比中光研究院缓玉华博士演讲现场图

正在Workshop现场,缓玉华博士由现有花费级深度相机入手,对比了单目布局光、被动双目、主动双目、ToF等不一样手艺计划的优劣势,并分享了其正在论文中提出的一种新型深度估量体系:它由一个RGB相机、一个红外相机和一个红外散斑投影器构成。

缓玉华博士团队提出的全新深度相机设计思绪

红外相机能够与此同时吸收红外光(人眼没有可见)和环境光(人眼可见)。红外相机和红外投影器能够组成一个单目构造光子体系,而红外相机和RGB相机又能够组成一对双目立体视觉子体系。

主动的单目布局光子体系对被动双目立体视觉子体系难以处置的弱纹理工具(如白墙)具有很好的鲁棒性,而双目子体系关于远距离物体和户外场景具有较好的适应性。是以,这两种范例的深度估量子体系能够优势互补。根据将单目布局光子体系得到的初始深度图融合到立体匹配网络的价格空间(Cost Volume)中,能够得到一个鲁棒的深度估量体系。

深度估量步骤

基于该道理,缓玉华博士团队构建了一个原型体系,并建立了一个新的立体视觉数据集,以考证新方法的有效性。测试结果表明,该体系的Bad2.0婚配偏差不到被动立体视觉体系的1/3。

论文提出的深度相机的结果,取现有的主动式深度传感体系Intel D435相比,输出的深度图具有更好的完整性,而且深度图和RGB图像是逐像素自然对齐的。

取其他深度相机正在室外比拟

精度优于0.15mm,重建元宇宙“数字人”

奥比中光携机器人深度相机亮相VALSE 2022,引领机器人、元宇宙创新应用开发

正在演讲中,缓玉华博士还展现了奥比中光专门为高精度人脸三维重修设计开辟的花费级深度相机Gemini Metric。因为采用了优化的硬件和高精度立体匹配算法,Gemini Metric可实现高多少精度、高保真纹理的三维人脸重修,精度优于0.15mm,可知足高质量数字人建立、医学美容整形等运用。

由Gemini Metric生成的三维人脸模子

由入门到精晓,奥比中光3D视觉课程上线

本次参展VALSE 2022,奥比中光3D视觉开发者社区现场带来《三维视觉:道理取实践》在线课程,为浩瀚学子、开发者开启3D视觉天下大门。

该课程由奥比中光多位算法专家、资深算法工程师打造,体系地先容了3D视觉的基本道理及利用实践。课程内容涵盖根底二维图象处置惩罚算法、深度学习方法、相机模子取标定、双目立体视觉、散斑构造光、飞翔时候法(ToF)等三维成像道理取算法、基于点云的三维重建算法、基于RGBD相机和LiDAR的SLAM算法、3D人脸辨认算法、RGBD图象支解算法、基于RGBD图象人体姿势估量、ROS机器人小车实战等,资助门生、开发者正在3D视觉范畴实现从入门到精晓的进阶。

百度搜索“3D视觉开发者社区”进入大讲堂板块,免费进修全系列课程

3D视觉感知手艺曾经深入民众的生活。正在智能手机上,3D视觉感知被适用于支付、解锁、照片美颜等。正在移动机器人和无人机上,3D视觉感知被适用于躲障、定位、导航。正在智能汽车行业,3D视觉感知被适用于自动驾驶、辅佐驾驶。正在AR/VR、元宇宙等范畴,3D视觉感知被适用于人机交互、内容创作。

奥比中光是市场上为数不多可以供应齐套自主知识产权3D视觉感知产物的企业,也是环球少数几家齐面规划六大3D视觉感知手艺线路的公司。现在,奥比中光曾经构建起“齐栈式手艺研发才能+齐行业手艺线路规划”的3D视觉感知手艺体系,重点赋能生物辨认、机器人、智能终端、智能汽车、伶俐家庭、数字孪生、AR交互等运用场景,为一百二十行数字化智能化升级供应3D视觉感知手艺支持。


参考资料