当前位置: 首页 > 成功案例

【芯调查】用1年时间突围!苹果、华为们加持的ToF有何底牌

发布时间: 2024-06-01 发布人:成功案例

 

  集微网报道(文/李延)从2018年开始,ToF技术就成为了半导体行业全力打造的新明星,曝光度有增无减。手机大厂,如三星、华为、OPPO、vivo、小米、LG等也在中高端机型中配置了ToF镜头。稍显尴尬的是,在对消费的人进行的调查中,很多人都认为ToF镜头的实际意义不大。

  不过,在苹果公司今年发布了2020版iPadPro以后,形势又为之一变。iPad Pro搭载了基于dToF模组的激光雷达扫描仪,配合苹果出色的AR应用,显示了ToF的真正实力。紧随其后,华为发布了同样配置ToF模组的P40系列和基于河图技术的AR地图。

  进入2020年,华为发布的P40、P40pro,三星的S20+、S20Ultra都搭载了ToF模组。该技术已慢慢的变成为高端机型的必配。从无到有,ToF进入手机之旅也有不小的一段时间。

  如果进行追溯,ToF首先在消费电子领域的应用是2013年,微软在Xbox游戏机的体感控制器Kinect V2.0中使用了3DV Systems的TOF技术,这个当时全球最小的ToF模组引发了市场的关注。

  联想在2016年发布了智能手机Phab2 Pro,首次在智能手机中引入了ToF。这个由英飞凌和pmd联合打造的方案能够正常的使用一些AR应用。不过,这次应用没有在市场中引起很大的反响。

  有意思的是,苹果在随后发布的iPhone7 plus中也开始使用ToF传感器。这样的产品是意法半导体为苹果定制的,放置在iPhone手机主扬声器上方,采用光学栅格阵列(LGA)封装形式,尺寸为2.8mm×2.40mm,小于意法半导体对外公开销售的任一款ToF传感器。随后没有大肆宣传,苹果反而在iPhone X中开始使用3D结构光,并不断进行推广。

  为了与结构光进行区分,国内的安卓阵营开始在2018年引入ToF,OPPO R17 PRO与荣耀V20 都使用了索尼IMX 316 ToF传感器。这颗传感器尺寸为1/6英寸,有效像素则只有4.32万。与之相对,VIVO NEX 双屏版的ToF镜头使用了松下的CCD 方案。由松下提供CCD sensor传感器搭配ADI的控制芯片实现3D感测功能,并具备Face ID功能。这枚传感器的图像分辨率也达到了640×480 VGA级别,约30W有效像素。

  在ToF不断主流化的进程中,多家芯片大厂都去参加了,但是索尼最终成为了传感器侧的霸主。2020年新发布的智能手机或iPadPro,其中的ToF传感器都是索尼提供的。一位业内人士就表示:“因为在技术上超前,华米OV这样的大厂首先会采用索尼的产品,这也给国内的ToF传感器供应商造成不小的压力。”

  从2015年收购比利时公司SoftKinetic获得ToF技术开始,索尼就开始不停地赶超对手。凭借在CMOS领域和系统方面的多年积累,索尼的ToF技术进展神速。到2019年最新的ToF模组问世时,其已经从3D感测接收器芯片的零市场占有率上升到45%。

  “ToF会完全取代结构光,但是iToF和dToF会长期共存。”一位行业人士如此判断。

  对于ToF技术来说,2020年最大的变化是dToF的崛起。因为苹果的示范作用,主流厂商都开始往dToF靠拢。

  dToF和其他手机上装载iToF同属ToF技术,但两者的“个性”确大相径庭。dToF (direct time-of-flight) 技术直接测量光脉冲的发射和接收的时间差,iToF(indirect time-of-flight),通过传感器在不同时间窗口采集到能量值的比例关系,解析出信号相位,间接测量发射信号和接收信号的时间差。下图比较了四种主流的3D感应技术。

  图2 4种主流3D感应技术比较(源自光鉴科技《ToF深度相机技术白皮书》)

  结构光、iToF和dToF在技术上各有擅长。光鉴科技CTO汪博就表示:“在短距离、低成本上方案上,iToF更有优势。如果测量距离比较远,成本空间又大,则适合dToF。如果是近距离拍照,dToF的误差并不低,反之,iToF、结构光更精准。”

  不过,dToF技术在测量精度、功耗、信号处理等诸多方面的优势显著,只是工艺难度制约了其发展。仅在精度这一方面,除了对时钟同步有非常高的精度要求以外,还对脉冲信号的精度有很高的要求。

  再者,由于安全性考虑以及消费电子科技类产品本身的功耗限制,激光发射器发出的脉冲能量有限,但要覆盖完整的视场区域,光脉冲在经过反射回到接收器时,单位体积内的包含的能量降低了很多倍。同时,环境光作为噪声,会干扰接收器对于信号的检测和还原。因此,dToF方案需要灵敏度极高的光探测器来检测微弱的光信号。

  采用SPAD(单光子雪崩二极管)阵列能够完全满足这些要求,不过掌握技术的厂家并不多,而且集成难度大。故此,在前几年的中高端手机中出现的都是iToF。

  还需说明的是,dToF的工作距离与发射端VCSEL(垂直腔表面发射激光器)光源的功率直接相关。要想实现远距离工作,就需要提高发射端VCSEL光源的功率,或者将脉冲周期缩短到纳秒级别,以提升脉冲瞬时功率。苹果dToF所采用的新一代VCSEL,正是在极短的时间内产生了数倍于普通VCSEL的高强度的红外脉冲激光,以此来实现了5m工作范围内的高精度3D深度感知。

  最后,在系统集成方面, dToF芯片要集成淬火电路,TDC、存储单元以及运算单元,还需要将功耗控制在很低水平,这也极端考验设计者的功力。

  从2018年开始,市场上就一直看好ToF的起飞。曾有机构预测,2019/2020 年全球搭载 TOF 模组的智能手机出货量分别为4300万和1.5亿部。考虑到华为、三星等部分高端机型搭载前后TOF模组,预测2019/2020年全球智能手机的TOF 模组合计为5700万和1.83亿个。

  2019年的情况基本和预期相符,但多事的2020年打乱了市场的节奏。“我们预测2020年搭载ToF的手机出货量为1.2亿部。”来自产业资本的投资人王华告诉集微网。

  据他透露,国内一家顶尖的手机ODM公司2020年拿到的ToF项目也就是5、00-600K的数量。其中,华为是300K,小米有100K左右。

  这其中有成本方面的考量。据供应链的消息,iToF模组的成本一直在10美元左右,dToOF成本稍高,接近15美元左右。从国外媒体发布的S20UltraBOM清单中,也证实了这一说法。

  以厂商的角度来看,ToF方案也有很多不成熟的地方。炬佑智能CEO刘洋表示:“在一些应用场景,需要动态算法的地方,没有厂家能全部覆盖到。比如,如果周围环境发生改变,物体发射率不一样了,ToF就没办法做出调整。”

  “而且,ToF技术发展时间较短,传感器还没有标准化,第三方也很少,生态还未完全形成。”刘洋补充道。

  除去这些基础层面,还有很重要的一点就是缺乏应用引领。“市场很火热,但是头部厂商还是比较谨慎。”王华分析原因,认为没什么应用能发挥ToF的功能。

  ToF的强项是景深测量,硬伤是分辨率低,所以还无法承担面部识别及相关的工作。容亿投资创始合伙人刘宏春就表示:“无论是成本,还是生产难度,ToF模组都比较高,所以厂商只能放在旗舰机上。而且担心功耗影响大,所以没有去大肆推广,只不过表明我已经有了这项技术。”

  拓墣产业研究院研究经理蔡卓卲也表示:“手机品牌厂导入ToF镜头,现阶段是取代景深镜头,并提供更好的拍照效果,做为多镜头的规格竞赛,不过长期而言,是着眼于未来5G时代的AR应用展开的铺路。”

  要推动应用发展,需要头部厂商发力,苹果已经给了很好的示范作用。利用dTOF摄像头,iPadpro能轻松实现很多好玩又适用的AR应用。如果同预测一样,苹果在今年9月份发布的iPhone 12上配备ToF摄像头,一个AR硬件生态就会显露雏形。

  国内手机生产厂商方面,华为对ToF的热情度最高,也有一个明晰的发展路径。在P40系列的同时,华为推出了基于华为河图技术的AR地图。这款AR地图可实现具有厘米级3D地图精度,1:1还原真实世界;高精度空间计算;AI、3D物体识别;虚实光影追踪等能力。华为用ToF的空间感知能力与彩色摄像头的高质量成像能力结合,实现真实世界人物与虚拟数字内容逼真的实时遮挡效果。

  据了解,华为的思路是要实现地球级的XR,要做到全场景覆盖,同时扩展到10米以上的应用。如此宏伟的架构,ToF就是这里面必不可少的一环。

  放眼手机之外,ToF也在其他领域不断进行尝试。近期,科沃斯等厂家在扫地机器人中使用了ToF相机,替换了传统的激光雷达,在整体成本一下子就下降的同时,产品也更加小巧、轻薄。还有汽车中的驾驶者疲劳监测、替代固体激光雷达、自动泊车,都是ToF理想的应用场景。只是这些应用都还处于起步阶段,尚难以拉动产业增长。

  据IHS Markit报告,ToF未来主要的应用市场还是来自智能手机市场,预计2020年对应市场规模超过6亿美元,占整个市场的90%以上,其次是平板电脑市场、建筑物检测、智能家居、汽车中控、无人机等应用领域。

  “今年的市场规模比去年扩大了好几倍,而且客户也都知道ToF是怎么回事,该怎样用了。”这是刘洋对市场的切身感受。

  这番改变的背后,也是整个国内供应链开始成熟的表现。纵观TOF产业链,方案、算法、发射端泛光照明器和接收端近红外摄像头是产业的四大支柱。四个部分中,方案部分由国外大厂完全统治,包括微软、pmd、ams、ST、TI、Melexis、索尼、松下等。接收端方面,如ToF传感器,除索尼、ST、ams、英飞凌外,炬佑智能、聚芯微电子等一批厂商也慢慢的开始崭露头角。

  不过接收端也是国内产业链差距较大的地方。下图是华为Mate 30 Pro TOF 摄像头供应链。能够准确的看出,别的环节都有国内厂商的身影,只有ToF传感器这环被索尼占据着。

  图4 华为 Mate 30 Pro TOF 摄像头供应链(源自东方财富证券研究所)

  索尼凭借着多年的积累和IDM模式,在CMOS图像传感器领域打遍天下无敌手,基本占据了半数的全球市场占有率。早在2017年,索尼就开发出具有VGA分辨率(640×480)的背照式ToF图像传感器IMS456QL。而国内的主要厂商,在2020年底才能实现VGA分辨率ToF传感器的量产。不过,差距也在缩小,国内厂商的研发实力正逐步增强,并通过一系列特有技术来提升产品竞争力。

  发射端的核心器件是VCSEL激光器。全球能够生产工业级VCSEL的IDM厂商有Lumentum、Finisar(被美国II-VI收购)、Philips Photonics(被德国通快收购)和Princeton Optronics(被 AMS 收购)等。iPhone的点阵投影仪和泛光照明器中的VCSEL均来自Lumentum,安卓的3D结构光产品中的VCSEL大多数来源于Princeton Optronics(ams),其次还有 Philips Photonics(通快)。国内厂商方面,初创企业纵慧芯光凭借出色表现已经成功打入了华为供应链。还有不少以光通讯或LED芯片背景的企业也在布局VCSEL,如光迅科技、华芯半导体、华工科技、三安光电、乾照光电等。

  VCSEL激光器由工业级应用转向消费级后,难点在于保持性能的情况下实现小型化。不过,ToF用的VCSEL激光器无需编码,工艺难度小于结构光,相对容易实现。

  模组方面,国内厂商一直比较活跃。舜宇光学、欧菲光等厂商都很早就开始了ToF方面的布局。舜宇光学具有镜头这一垂直领域优势,同时还拥有众多元器件的子公司,实现了产业链垂直整合。欧菲光则通过战略投资获得模组、镜头和VCSEL芯片,打通产业链。舜宇和欧菲都已经打入了主流厂商(华为、三星、OPPO等)的供应链,随着ToF渗透率的提高,将会带动国内产业生态的进一步发展。

  因为持续火热,ToF也引发了一波又一波的长期资金市场“追星热潮”。围绕ToF的融资事件不断上演,金额也在快速加码。就在近期,聚芯微电子宣布完成1.8亿元B轮融资。其中1.2亿元由和利资本领投,源码资本跟投,6千万元由湖杉资本、将门创投及知名手机产业链基金的联合投资。同时,纵慧芯光获得了华为控股的哈勃科技投资有限公司的入股。此外,炬佑智能、柠檬光子、唐晶量子等国内领先企业,也开启了最新一轮的融资过程。

  有AR应用开路,苹果、华为等大企业护航,ToF的长期前景是不需要质疑的。对于国内企业来说,最重要的还是要掌握核心技术。毕竟,对于一个新兴的行业,短期发展取决于供应链,长期发展还是要看取决于技术的演进。(校对/Humphrey)

最新资讯

扫码获取最新资讯

版权所有:欧宝网站多少,欧宝平台官网手机版下载地址 豫ICP备2021008316号-1 技术支持:网站地图