3d视觉的新趋势和成熟的商业化落地实践to integrate the advantages of r&d, design...

21
To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor for all consumer and industrial markets, like smartphone, robotic, healthcare, smart home, AR/VR, interactive, education, automotive, etc. and building a complete and open ecosystem around 3D sensing technology. 奥比中光副总裁 陈挚 博士 3D视觉的新趋势和成熟的商业化落地实践 New Trends in 3D Sensing and Mature Commercialization Practices

Upload: others

Post on 16-Oct-2020

2 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth

sensor for all consumer and industrial markets, like smartphone, robotic, healthcare, smart home, AR/VR, interactive, education,

automotive, etc. and building a complete and open ecosystem around 3D sensing technology.

奥比中光副总裁 陈挚博士

3D视觉的新趋势和成熟的商业化落地实践

New Trends in 3D Sensing and Mature Commercialization Practices

Page 2: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

第一次视觉革命

黑白到彩色

第二次视觉革命

模拟到数字

第三次视觉革命

普清到高清

第四次视觉革命

2D到3D01

02 03 04

视觉技术发展

我们现在看到的绝大部分图像,视频都是通过

2D摄像机平面成像,无法识别物理世界中的三

维信息(如:尺寸,体积,距离等几何数据);

3D摄像机立体成像,能够识别视野内空间投射

不可见光斑,获取每点位的三维座标信息,使

得到空间的3D数据并能够复原完整的三维图像。

2D 3D

Page 3: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

苹果引领 3D视觉应用快速发展

随着2017年苹果率先将基于3D结构光技术的Face ID应用在iPhone X上之后,彻底引爆了3D成像市场。

Yole D‘developpement最新的预测则显示:

2019-2025 年 3D成像与传感市场规模将从 50 亿美元增加至

150 亿美元,复合增长率仍可超过 20%。特别是在消费电子领域,

3D成像和传感市场将从2019年的20.17亿美元增长到2025年的

81.65亿美元,年复合增长率超过26%。

Page 4: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

3D成像的终端将迅猛增长

随着人工智能和5G的迅速发展,奥比中光敏锐的捕捉到了3D感知技术在物联网时代的三维应用浪潮,并结合全球光学产业链向亚洲转移世纪机

遇,大力发展底层核心技术和下游的应用生态。

• 资料来源: Allied Market Research,券商研究报告,SDM Journal,IJSH, Grand View,IDC,公司预测

• 1 智能POS机、互联网设计及家装和智能安防为中国数据,其余出货量、市场总额为全球数据。

• 2 智能POS机市场预测数据到2020年。

• 3 互联网设计及家装市场预测数据到2022年。

• 4 智能安防市场预测数据到2020年。

• 5 包含家庭服务机器人、工业机器人和商业机器人。

3D成像手机(安卓)

151% CAGR2018E-2023E 亿台

VR / AR62% CAGR

2018E-2023E 百万台

18% CAGR2018E-2023E服务型机器人5 万台

智能POS机(中国)

56% CAGR2018E-2020E 百万台

智能门锁/门禁67% CAGR

2018E-2023E 百万台

智能安防(中国)

83% CAGR2018E-2020E 亿元

2018

0.1

7

110

7

6

135

2023

11.2

79

250

172

79

4534

出货量 /市场总额1

互联网设计及家装(中国)

54% CAGR2018E-2022E

万亿元0.2 1.33

Page 5: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

3D传感技术分类

主要分为结构光、ToF和双目视觉,不同的技术路线决定了精度曲线,进而决定应用场景

双目立体视觉 结构光 TOF飞行时间

双目受环境光影响较小,适用于中、远的室外场景;

TOF和结构光,在中、近距离上,根据场景不同,适用于不同的方案。

Page 6: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

结构光 i-TOFd-TOF

(近距离手机)双目 激光雷达

类型 主动式 主动式 主动式 主/被动式 主动式

距离 1~2m <5m <5m 适中 百米~千米量级

空间分辨率 高 中 低 高 低

算力要求 高 中 中 高 中

技术成熟度 高 中 低 高 低

成本 低 低 低 低 高

典型使用场景FaceID,

扫描建模,机器人等

手机后置 手机后置车载,无人机,

机器人测绘,无人驾驶

各类3D传感技术特点

Page 7: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

没有最好的3D传感技术,只有最适合的技术

Page 8: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

技术变革会触发新市场,但是最终应用场景会驱动技术和产品的进程

Page 9: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

底层元器件 模组生产制造 系统架构设计 应用算法落地

3D传感产业链协同

基础元器件,数字模拟IC

激光光源:VCSEL,LED,EEL

光学元器件:镜头,DOE,diffuser,红外滤光片,镀膜技术,etc.

传感器:IR CMOS,i-

ToF sensor,APD,SiPM, etc.

计算单元:CPU,FPGA,ASIC,etc.

子模组的组装,生产

系统标定,检测

质量管控,效率提升

工艺流程

光机电系统一体化设计

深度定义核心元器件

深度引擎(Depth

engin)算法研发

应用场景的深入理解

3D建模

导航避障

人脸识别

骨骼/动作识别跟踪

图像背景分割

等等……

Page 10: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

消费电子产品

搭 载 奥 比 中 光 3 D 摄 像 头

2 0 1 8 年 6 月 赋 能 Op po F ind X

使其成为全球第一款搭载3D摄像头的安卓手机

4月18日 康佳智能电视

—A P H A E A A 5旗舰版

全球首款智能电视搭载3D摄像头

2020年4月,奥比中光为新品提供全球领先的

“AI 3D摄像头+算法”软硬件一体的3D感知

整体解决方案,创新性地实现AI健身、大屏社

交、AR游戏等交互体验;

全球首款拥有3D摄像头的安卓机

魅族17 Pro搭载奥比中光TOF方案

2020年5月,奥比提供的ToF系统解决方案为魅族

17 Pro带来优秀的3D深度感知性能。基于此方案,

新品实现了手机渐进式拍照背景虚化、实时低功耗

的视频背景虚化,以及精准的AR体验。

奥比中光正在为手机、电视、笔记本、平板等消费电子行业提供3D视觉一站式解决方案和定制化服务

Page 11: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

3D智能门锁套件

凯迪仕-兰博基尼传奇3D人脸智能锁

人脸秒级识别 1.2-2米身高视角全覆盖

高清人脸照片防伪攻击 动态人脸辩识

Page 12: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

地产 房屋空间三维重建

自动生成立体场地3D空间模型,三维格局一目了然

全新的空间展示方式,沉浸式的漫游体验

为客户提供3D实景沉浸式体验

装修风格切换

物品建模将房屋三维户型图与智能设计相结合,通

过家具、风格的实时渲染和拼接,在短时

间内将购房者脑中的装修方案具象化。实时渲染

自动拖拽…

看房--买房--装修一站式解决方案三维技术交互革新

Page 13: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

3D量体-服装定制

通过三维重建算法、测量算法、加放算法、尺码比对算法等AI算

法,替代老裁缝、版型师的工作;

3D测量仪--AI量体师

NO.1 智能扫描

全自动化量体、制版

1秒3D量体,1分钟AI制版

NO.2 制版绘图

一人一版、精准定制

NO.3 裁剪加工

智能化设备、自动裁剪

最优裁剪指令

NO.4 精心缝制

树百道关键工序精心缝制

NO.5 工艺处理

全球领先的制衣工艺,精心处理

NO.6严格质检

高标准质检中心层次把关

NO.7包装物流配套、包装、物流快,顺丰直邮、

确保交期

NO.8服务跟进

服务跟进着装建议、搭配指导协

助提升复购

按需生产,一人一版从下单到生产完成仅需7天

Page 14: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

用人工智能助力全新足部业务,用数据赋予鞋企全新零售模式

个性化定制

以脚型三维模型数据为

核心,利用3D打印制作

出个性化鞋子、鞋垫;

数据库建立

采集足部信息,建立数据

库,为鞋子研发方案提供

精准有效的数据支撑;

门店智能导购

准确提取足部各项数据,

实现智能选购,推动实

体门店新零售;

足部扫描模型图

应用案例:

3D智能验脚仪搭载奥比中光解决方案,该产品可3D

扫描足形,读取⾜印、⾜⼸数据,根据参数可以判断

足形等问题。同时,验脚结果会⾃动保存到数据库中,

记录孩子足部成长的状态,

技术优势

传感器采用自主研发的三维

结构光模组,具备光学设计、

芯片设计等核心技术.

算法优势

掌握图像融合、三维重建、

深度算法等多项核心算法,

融合前沿大数据分析学习,

人机互动及AI智能技术.

成本优势

采用结构光技术,抛弃激

光扫描传感器,保证测量

精度和速度,降低成本,实

现效益的最大化

3D足部测量

Page 15: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

奥比中光积极布局工业互联网,推出三维光学测量解决方案矩阵,覆盖三维外形测量、质量检测、材料力学性能的三维应变变形测

量、结构和运动载荷状态的三维动态运动轨迹测量多个领域,可实现全尺寸外形和变形尺寸测量,覆盖汽车、航空航天、造船、新

能源以及机械工程等多个领域。

外形轮廓测 量 材料力学变形测量 动 态 轨 迹 追 踪

科研仪器和自动化监测设备

Page 16: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

16

• 奥比中光智能座舱感知方案,采用3D-ToF传感器

• 可兼容各类安装位置。未来将逐步推出不同FoV视场角的产品,覆盖不同安装位置需求

• 可包含多种功能,如DMS,OMS,手势识别,安全气囊检测,人脸识别,身份验证等

后视镜上方:安装方便,可覆盖全车前后排乘客。需要宽视场角产品

A柱:不受遮挡,适合专注驾驶员DMS,但角度较偏,算法较难

转向柱:安装复杂,方向盘容易遮挡,但观察驾驶员图像易处理

3D视觉智能座舱方案

Page 17: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

2 0 1 3 年成立 总部位于深圳深圳、上海、西安、密歇根

4个研发中心8 0 0 +员工

70%研发人员800+3D感知专利申请全球客户2000+ 量产3D摄像头

实现3D传感摄像头国产化第一家3D感知专利布局世界前三

奥比中光简介

让所有终端都能看懂世界

Page 18: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

引领3D感知技术前沿,助力大湾区智能硬件产业跃升

产业发展“探索者”、“组织者”和“引领者”

智能汽车及自动驾驶

消费电子

智能家居 机器人

3D感知

手机

• 3D人脸识别

• 覆盖前、后端

• 提高屏占比

交通

• DMS

• 手势操控

• 激光雷达

VR/AR

• SLAM

• 环境建模

• 手势交互

新零售 • 刷脸支付3D

• 商品识别

• 行为分析

工业 • 3D扫描重建

• 3D扫描检测

• 3D识别

客厅

• 千人千面

• 体感交互

• 虚拟试衣

安防

• 门锁

• 闸机/道闸

智慧物流• AGV小车

• 体积测量

• 重点赋能智能汽车及自动驾驶、消费电子、智能家居、

机器人等领域

• 集聚上下游企业,推动更多3D视觉感知应用标杆项目

落地

• 打造3D感知技术创新策源地和产业高地,进入创新链、

产业链、价值链高端

Page 19: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

国内首个3D视觉开发者社区

使命:让所有开发者都能够获取高效与专业的技术服务

唯一性

奥比是专注于3D视觉技术的企业,打

造目前国内唯一专注于3D视觉的开放

社区,填补国内行业空白。

解决选择性的空白

综合性

社区提供RGBD模组,配套的开发板

以及SDK,还提供专业的指导文档,

提高开发效率。

丰富的开发套件

适配性

奥比中光的开发板、SDK与RGBD模组实

现高度匹配,降低开发时间与成本。

高适配与易学易用

专业性

社区中有非富的3D视觉技术素材,包括

FAQ的知识问答,帮忙开发者快速解决问题

专业全面的知识体系

Page 20: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

2020年9月,奥比中光与OpenCV签署《战略合作协议》,双方正

式成为战略合作伙伴。OpenCV5.0规划将纳入3D视觉技术内容,

奥比也将基于OpenCV平台构建开发者生态。

扫码关注3D视觉开发者社区:品牌IP活动:

开发者平台合作:

课程分享 技术沙龙 产品发布会

开发者社区品牌活动

Page 21: 3D视觉的新趋势和成熟的商业化落地实践To integrate the advantages of R&D, design and production of 3D sensing technology to develop the state-of-art 3D depth sensor

让所有终端都能看懂世界