文章详情

深度摄像头(TOF Camera)原理

日期:2021-04-06 00:20
浏览次数:5860
摘要: 深度摄像头是什么江苏快3江苏快3? 深度检测只是计算机视觉中一个基本而又核心的任务江苏快3,要准确地检测目标,可能还需要做很多图像分割江苏快3,识别江苏快3,跟踪方面的工作江苏快3。 人类双眼的基本原理就是stereo vision的主要依据,依靠视差(disparity)来估计深度。 本身没有深度检测功能的摄像头江苏快3,可以使用立体视觉的原理(stereo江苏快3江苏快3,MVS)来估计深度江苏快3,而有深度检测的摄像头江苏快3江苏快3,比如说Kinect江苏快3江苏快3,也常常是利用视差原理来求取深度的江苏快3,投射一个pattern江苏快3江苏快3,然后比较江苏快3。 当然*开始求取深度的江苏快3,还有广泛使用的激光雷达(RangeFinder)江苏快3,只...

深度摄像头是什么江苏快3江苏快3?

深度检测只是计算机视觉中一个基本而又核心的任务江苏快3江苏快3,要准确地检测目标江苏快3江苏快3,可能还需要做很多图像分割江苏快3江苏快3,识别江苏快3,跟踪方面的工作江苏快3江苏快3。

人类双眼的基本原理就是stereo vision的主要依据江苏快3,依靠视差(disparity)来估计深度。

本身没有深度检测功能的摄像头,可以使用立体视觉的原理(stereo江苏快3,MVS)来估计深度江苏快3江苏快3,而有深度检测的摄像头江苏快3江苏快3,比如说Kinect江苏快3,也常常是利用视差原理来求取深度的江苏快3江苏快3,投射一个pattern江苏快3江苏快3江苏快3江苏快3,然后比较江苏快3江苏快3。

当然*开始求取深度的江苏快3江苏快3,还有广泛使用的激光雷达(RangeFinder)江苏快3,只是成本很高江苏快3,军用江苏快3江苏快3,工业用比较多江苏快3江苏快3江苏快3。

深度摄像头面临的问题

可以肯定的是深度摄像头获取的深度信息有非常广泛的应用江苏快3江苏快3,但目前仍存在一些问题江苏快3江苏快3,我觉得*为核心的两个方面:一是测量范围江苏快3江苏快3;二是应用环境江苏快3。

目前深度相机的测量范围也就几米江苏快3江苏快3,对应用环境的要求也比较苛刻(主要受环境光影响严重)江苏快3江苏快3。所以江苏快3,目前的深度相机应用在监控上还有非常遥远的路要走江苏快3。

计算机视觉的范围就太广了江苏快3,除了通过相机获取信息之外江苏快3,更重要更复杂的是对获取的信息进行理解:

包含三维信息提取江苏快3江苏快3、物体识别、分类江苏快3、运动跟踪等等。双目视觉是目前深度测量的一种方法江苏快3江苏快3江苏快3,这种方法同样面临很多问题江苏快3江苏快3,比如要求场景有明显的特征江苏快3,算法复杂等等江苏快3。

总之江苏快3,现在离深度摄像头被广泛应用还有很长的路要走。

未来深度摄像头的市场

2017年苹果将发布三款机型江苏快3,其中OLED机型的前置摄像头可能有重大升级江苏快3,预期配备深度摄像头模组江苏快3江苏快3江苏快3。他预期此先进的深度前置摄像头模组江苏快3江苏快3江苏快3,将具备三维感测与三维建模能力。

消息一出,整个资本市场沸腾了江苏快3江苏快3,纷纷寻找供应链相关企业投资标的江苏快3江苏快3,相关公司股票都有巨幅上涨。

显然仅仅认为这是一次资本市场的题材操作江苏快3,这是对国外成熟资本市场的侮辱江苏快3,由于苹果巨大的光环效应江苏快3,它的一举一动都会引起整个高科技行业的剧变江苏快3,一旦传闻坐实江苏快3,深度摄像头将从原来相对小众的行业市场快速进入大众消费移动市场江苏快3江苏快3。

我们从苹果供应链得到的消息是:这次苹果的确是在前置摄像头使用结构光技术的深度摄像头,各家供应商都已经确定江苏快3,连代工厂的相应光学标定流程也已经固化江苏快3,现在就等苹果正式发布的时候公布具体信息了江苏快3。

同时消息源指出江苏快3,由于该深度摄像头模组的功耗较高江苏快3,接近1瓦江苏快3江苏快3,所以现在只是用在前置摄像头用作手势和面部识别等时间较短的应用,后置摄像头的环境建模等应用起码要等下一代产品才可能用上了。

果粉可能认为深度摄像头又是啥一家黑科技了江苏快3江苏快3,其实前两年开始芯片业巨头Intel一直在各个公众场合高调宣传的RealSense实感摄像头江苏快3,其实就是一个深度摄像头江苏快3江苏快3。

它的各类应用也引起了业内人士和一些行业媒体的关注。怎奈Intel在消费市场的影响力差苹果有100个高通的距离江苏快3江苏快3,所以深度摄像头的概念对普通大众来说仍旧是不知所云。那么它到底是何方神圣江苏快3江苏快3?

这种摄像头和普通摄像头的区别就是除了能够获取平面图像以外还可以获得拍摄对象的深度信息江苏快3江苏快3,也就是三维的位置和尺寸信息江苏快3江苏快3江苏快3,于是整个计算系统就获得了环境和对象的三维立体数据江苏快3。

实际深度摄像头早在上世纪80年代就由蓝色巨人IBM提出相关概念江苏快3,这家现在显得有点英雄迟暮的巨头在基础研究领域可谓是整个时代的领跑者江苏快3。

2005年创建于以色列的 PrimeSense 公司可谓该技术民用化的先驱江苏快3,以色列的**能力由此可见一斑江苏快3,而且该领域以色列技术公司的数量是*多*好的江苏快3。

当时,在消费市场推广深度摄像头还处在概念阶段,此前深度摄像头仅使用在军事和工业领域江苏快3江苏快3,为机械臂江苏快3江苏快3、工业机器人等提供图形视觉服务江苏快3江苏快3。由它提供技术方案的微软Kinect1代成为深度摄像头在消费领域的开山之作江苏快3,并带动整个业界对该技术的民用开发江苏快3。

PrimeSense本来以为抱到微软大腿就可以仙福永享了江苏快3,但是在2012年微软先后收购了以色列的TOF摄像头公司canesta和3dv,2013年微软终止与PrimeSense的合作江苏快3,自行开发了Kinect2代(成为Kinect one)江苏快3江苏快3,改走TOF技术路线江苏快3江苏快3。

这一变故使得PrimeSense只能另找靠山,于是在2013年苹果正式收购PrimeSense江苏快3,将它的技术和砖利收入囊中江苏快3,并且停止对外技术授权和供货江苏快3江苏快3。显然这次苹果使用的深度摄像头技术就是来自收购的PrimeSense江苏快3,使用结构光技术路线江苏快3江苏快3。

如果大家认为只有微软和苹果有大动作江苏快3江苏快3江苏快3,那就图样了江苏快3,前面提到的Intel也是通过收购Tyzx和Omek等公司做出了RealSense这一明星级产品江苏快3江苏快3,现在任何公众场合都是Intel高调宣传的重点江苏快3江苏快3,去年还收购了视觉处理器厂商Movidius江苏快3江苏快3。被Facebook收购的VR巨头Occulus在2014年左右接连收购了Nimble VR江苏快3江苏快3、13th Lab江苏快3、Surreal Vision和Pebbles Interfaces等多家相关领域创业公司江苏快3,完善了自己的技术布局江苏快3江苏快3。

索尼则在 2015 年 10 月宣布收购比利时一家名为 SoftKinetic 的TOF传感器初创公司江苏快3江苏快3,为自己的VR和游戏机产品保驾护航。

软件巨头谷歌虽然没有通过收购直接进入深度摄像头硬件领域江苏快3江苏快3,但它的Project Tango却是利用深度摄像头做移动应用的*佳软件范例江苏快3,并且前不久开源了一个业界*关心的视觉SLAM(同步定位与建图的缩写)方案江苏快3,联想也发布了一款使用Tango方案的Phablab2手机江苏快3,作为开发人的开发平台江苏快3江苏快3。

显然深度摄像头及相关的计算视觉领域已经成为整个科技行业*热门的领域之一江苏快3江苏快3江苏快3,为何热门江苏快3?

从前面的介绍中可以看出江苏快3,一个能够获得环境三维信息的传感器对机器识别和认识世界起到了极端重要的作用江苏快3,因为视觉信息是人脑和机器获取外界信息*大的渠道江苏快3江苏快3江苏快3,人的眼镜能够获得三维的信息江苏快3江苏快3,所以对世界的识别会比较准确江苏快3。

原来由于技术的限制江苏快3,普通摄像头获得的平面图像信息对机器理解世界产生了巨大的限制,现在由于深度摄像头的出现江苏快3,使得机器也获得了三维视觉能力江苏快3江苏快3,让机器认识和理解世界产生了飞跃的进步江苏快3。人工智能要借助于计算视觉的发展来获取和识别外界的视觉信息江苏快3江苏快3。

所以今天在机器人导航、自动驾驶、无人机江苏快3、AR/VR/MR、三维重建江苏快3江苏快3江苏快3、人机互动江苏快3江苏快3、智能制造等*热门的领域都有深度摄像头的身影闪现江苏快3江苏快3,而且在这些领域都是必不可少的基础传感器江苏快3,所以巨头的这些动作也就不难理解江苏快3江苏快3江苏快3,*基础核心的技术自然要自己掌握才放心江苏快3。

在人工智能火热的今天江苏快3江苏快3,该领域成为显学自然是应有之义江苏快3,只不过行业内热闹不代表能传递到大众领域江苏快3,这次苹果的出手终于将热度带到大众市场江苏快3江苏快3,并且在资本市场已经产生影响。

尤其是苹果在整合供应链的方面也有了大动作,它主导的几个供应商之间的资本运作已经启动江苏快3江苏快3江苏快3江苏快3,比如奥地利微电子(AMS)就高价收购了Heptagon,欧菲光也收购了一家以色列初创公司mantis vision江苏快3。当然江苏快3江苏快3,这一切都仅仅是开始江苏快3江苏快3江苏快3,今后的资本运作会更加频繁江苏快3江苏快3。

显然国内资本市场也不会放过这个风口江苏快3江苏快3,搜索枯肠江苏快3,国内能够和该领域直接挂钩的上市公司几乎没有江苏快3。那么非上市公司呢江苏快3江苏快3?居然发现中国在该领域的初创公司已经走在了世界的前列。图漾科技就是其中一家江苏快3江苏快3江苏快3,这家总部位于上海的初创公司在业内已经名声在外江苏快3,*近更是接到大量投资机构的拜访请求江苏快3〗湛?江苏快3!?近来找我们的投资机构几乎踩破门槛江苏快3江苏快3,主要是来了解行业信息江苏快3江苏快3,当然也会提到今后的投资机会江苏快3江苏快3,”图漾科技的副总经理徐韬向我们透露江苏快3。近期他们发布了一款高清分辨率(实际达到960P)的深度摄像头江苏快3江苏快3,从性能指标看江苏快3江苏快3江苏快3,它已经超越RealSense和Kinect2。

说到技术路线江苏快3江苏快3,现在深度摄像头主流有三个技术路线:单目结构光江苏快3、TOF(飞行时间)和双目视觉江苏快3。TOF原理是传感器发出经调制的近红外光江苏快3江苏快3,遇物体后反射江苏快3江苏快3,通过计算光线发射和反射时间差或相位差来换算被拍摄物体的距离江苏快3江苏快3。

结构光(Structured Light)技术则要相对复杂一些江苏快3,该技术将编码的光栅或线光源等投射到被测物上江苏快3江苏快3,根据它们产生的畸变来解调出被测物的三维信息。

双目视觉则是和人眼一样用两个普通摄像头以视差的方式来计算被测物距离江苏快3江苏快3。三种方式各有优缺点,在现有技术条件下各有应用场景江苏快3江苏快3。

但图漾则是结合了双目和结构光提出了主动双目的技术江苏快3江苏快3,相比现有方案有了相当的原理优势江苏快3,可以获得更好的深度数据质量江苏快3江苏快3,更好的环境适应性江苏快3,更高的产品工作寿命和多设备间无干扰的特性江苏快3江苏快3,这些特性在行业应用中几乎是必备条件江苏快3,所以他们的产品主要针对行业市场开发,现在主要用在机器人江苏快3、安防江苏快3江苏快3、物流和工业自动化领域江苏快3。

徐韬认为:随着Mantis被收购江苏快3,现在市面上的独立深度摄像头供应商只剩下中国几家初创公司江苏快3江苏快3江苏快3,那些巨头都不屑做配件供应商江苏快3,只会为自己的整机服务江苏快3,比如苹果收购PrimeSense以后就不再对外供货,很多厂商失去核心部件供应商江苏快3,造成巨大的供应链风险。只有Intel提供摄像头模组,但需要搭配它的处理器江苏快3,型号也极少,不能定制江苏快3,无法满足绝大部分客户需求江苏快3江苏快3江苏快3。

再加上全球电子产业链高度集中在中国江苏快3江苏快3,让本土的初创企业拥有了极大的生存空间江苏快3。

结合智能手机市场份额愈来愈集中到中国厂商的趋势江苏快3江苏快3,深度摄像头移动市场的战争几乎就是在苹果和中国厂商之间展开江苏快3。

苹果所开启的深度摄像头移动市场将会在大众市场快速普及三维视觉的应用,其市场想象空间巨大江苏快3江苏快3,但这次我们终于可以看到有本土企业在这个新兴市场成为主力玩家江苏快3。


下一篇: 工业机器视觉3D传感器
上一篇: 机器视觉

粤公网安备 44030602002639号

江苏快3