10月8日至10日,,,,,“CV界”盛宴VALSE 2021(视觉与进建青年学者钻研会)在荆门国际博览中心进杏祝。。。。。大会金牌赞助商z6娱乐中光携3D智能抠图算法、开发者套件等全新技术规划与产品,,,,,以“感知·3D全视界”为主题参展,,,,,吸引现场青年学者与专业观多立足互换。。。。。。9日上午,,,,,z6娱乐中光钻研院算法团队掌管人钱贝贝博士在大会上颁发了《3D视觉 更懂世界——从感知到认知》的演讲,,,,,分享了z6娱乐中光3D视觉感知技术从深度信息获取到三维沉建、落地利用过程的研发突破。。。。。。
在演讲中,,,,,钱贝贝博士萦绕3D感知、3D沉建、3D鉴别等话题,,,,,分享了z6娱乐中光3D视觉感知技术的根基道理与公司最新算法研发突破。。。。。;;;;;谟布级的高精度3D信息与前沿深度估推算法,,,,,z6娱乐中光可实现基于纹理加强的三维人脸沉建、人体沉建,,,,,并通过3D鉴别算法开发出各类3D智能利用。。。。。。
今年3月,,,,,z6娱乐中光钻研院徐玉华博士在CVPR颁发论文 “Bilateral Grid Learning for Stereo Matching Networks”,,,,,提出了一种可能以高分辨率回归视差图的步骤,,,,,可在双目深度估计过程中同时维持高效能与高精度,,,,,显著改善了传统步骤在弱纹理、边缘情况下深度估计禁绝、信息缺失等情况,,,,,使得深度图越发齐全。。。。。。

△ z6娱乐中光钻研院算法团队掌管人钱贝贝博士在VALSE 2021颁发演讲
现场,,,,,钱贝贝博士展示了团队最新研发的3D智能抠图算法全新技术规划。。。。。。该规划实现了基于布景建模的轻量化远景抠图,,,,,可能同时抠取清澈的3D人像及物品,,,,,可宽泛用于直播带货、视频会议、游戏渲染、场景理解、自动驾驶、指标跟踪、混合显示、电影造作等场景。。。。。。
钱贝贝博士介绍,,,,,主播在直播带货场景中同时要售卖很多款商品,,,,,在抠图时,,,,,若是用传统2D抠图常用的语义宰割、显著性检测等方式,,,,,容易受物品类别及显著性等限度,,,,,难以正确从杂乱的布景中抠取主播与商品。。。。。。z6娱乐中光通过布景+人图软宰割的步骤,,,,,设计了轻量化的Stage Block网络框架,,,,,并基于大量数据训练,,,,,实现了人、物与布景的精确宰割,,,,,并可凭据分歧需要平衡抠图的精杜纂速度。。。。。。
在真实数据集的测试阐发中,,,,,相迸宗其它方式,,,,,基于布景建模的轻量化远景抠图的各方面数据都有了显著提升,,,,,其FLOPs降低89.9%,,,,,Param降低 87.7%。。。。。。

△ 基于布景建模的轻量化远景抠图与其它方式成效对比
除了能同时抠取人像与物品,,,,,抠取自界说距离布景也是z6娱乐中光3D智能抠图的一大亮点。。。。。。3D抠图支持用户自界说抠图距离,,,,,可过滤掉布景中不有关的人物,,,,,起到;;;;;ひ衷的作用。。。。。。如用户在家中参与视频会议时,,,,,能够调整3D抠图距离,,,,,不让其他参会者看到自己的家庭成员。。。。。。




△ 现有在线视频会议软件中的2D抠图和z6娱乐中光3D抠图成效对比
此表,,,,,钱贝贝博士介绍,,,,,3D智能抠图对于细节的还原也更为精确,,,,,能够更好地抠取头发、手指等细节。。。。。。“这是由于3D相机采集的深度信息为算法提供了先验信息,,,,,有利于算法将细节处抠获得更为齐全。。。。。。相比之下,,,,,2D抠图算法容易导致细节迷失,,,,,必要共同更高的分辨率才可能抠取细节,,,,,但更高的分辨率会导致算法速度变慢,,,,,履历变差。。。。。。”

△ 观多在z6娱乐中光展位上旁观3D智能抠图算法演示
在VALSE 2021展位现场,,,,,z6娱乐中光还带来了iToF开发者套件及3D视觉机械人开发套件等产品,,,,,获得不少开发者立足和青睐。。。。。。
今年9月,,,,,z6娱乐中光颁布iToF智能视觉平台,,,,,提供从芯片、模组、智能算法到整机的全栈式规划,,,,,满足了AIoT多元化的iToF规划需要。。。。。。在VALSE 2021上展出的iToF开发者套件蕴含z6娱乐中光基于iToF智能视觉平台开发的相机Femto,,,,,搭载高品质iToF感光芯片,,,,,合用于0.2m-5m距离内3D对象扫描及深度数据丈量,,,,,可用于开发视频安防监控、扫地机械人、3D扫描、物流包裹检测等产品利用。。。。。。

△ 观多在z6娱乐中光展位上旁观Femto、开发者套件等产品演示
另一款ORBBEC MR100则是以3D视觉硬件及软件算法为基础的移动机械人开发平台。。。。。。ORBBEC MR100搭载了z6娱乐中光Astra Pro深度相机、单线激光雷达、英伟达Jetson nano高机能处置器、串联机械臂、柔性机械爪等部件,,,,,内置ROS melodic系统,,,,,支持3D人体骨骼鉴别、3D视觉指标追随、物体鉴别、三维空间沉建与导航等,,,,,还能够运行深度进建,,,,,支持拓展语音交互等职能。。。。。。

△ 现场观多相识z6娱乐中光3D视觉机械人开发套件幼车
在VALSE 2021展位上,,,,,z6娱乐中光现场开启了3D视觉开发者社区与人才招聘直达入口,,,,,为多多有志于3D视觉行业的青年人才提供了专业渠路。。。。。。
西安电子科技大学研一学生董天成暗示,,,,,“对z6娱乐中光的3D视觉技术很感兴致,,,,,将来会持续关注3D视觉开发者社区,,,,,但愿毕业后有机遇去z6娱乐中光西安钻研院工作。。。。。。”
分享到