东芝已成功研发出具有3D识别功能的单目摄像头人工智能技术
2020-08-03 10:41:24爱云资讯739
据麦姆斯咨询报道,东芝已成功研发出具有3D识别功能的单目摄像头人工智能(AI)技术,测量距离的精度不输立体摄像头。东芝的方案采用市售单目摄像头拍摄图像,然后利用独特设计的镜头造成图像模糊,通过深度学习分析来实现。该技术降低了对立体摄像头的需求,成本和尺寸都有所降低。
近年来,图像传感技术在众多领域变得越来越重要:例如可抓取和移动物体的机器人、无人驾驶车辆、无人机基础设施检测等。诸如此类的应用需要的不仅仅是拍摄物体的图像,还需要有个小型设备来分析3D数据,包括形状和距离。因此,使用体积更易小型化的单目摄像头测量技术受到了极大关注。目前的研究越来越集中于使用单目摄像头,通过深度学习来改进测距技术,更好地了解成像物体的形状、背景和其它场景数据。
然而,该技术也存在缺点:单目摄像头的测距精度取决于深度学习训练的场景数据,因此对于不同场景中拍摄的图像,测距精度会大大降低。为了消除对这些数据的依赖性,东芝开发了一种分色滤镜(color-filtered
aperture)拍摄技术。该技术通过在镜头上安装两个分色滤镜,然后根据与被摄物体之间的距离来分析最终图像模糊的颜色和大小。虽然这种方法解决了数据依赖性问题,但整改现有镜头需要花费大量时间和金钱(图1)。
图1 东芝开发的新技术在3D识别方案中的优势
东芝现已克服这一问题,他们开发的具有3D识别技术的人工智能,采用普通的单目摄像头,无需场景数据,仅利用深度学习来分析图像模糊(模糊的形状)如何根据其在镜头上的位置而变化,从而实现与立体摄像头同样高精度的距离测量(图2)。
图2 东芝研发出的具有3D识别功能的单目摄像头方案
到目前为止,从理论上讲,根据图像模糊的形状进行测距还是非常困难的,因为当物体与焦点等距时,物体无论远近都是一样的(图3)。然而分析结果表明,即使与焦点等距,近距物体和远距物体的模糊形状也存在很大差异(图4)。在此基础上,东芝成功地利用深度神经网络模型训练的深度学习模块对采集到的图像进行模糊数据分析。
图3 固定思维:物体与焦点等距时,无法通过模糊形状测距
当光通过镜头时,所产生的模糊形状会根据光的波长及其在镜头中的位置而改变。在东芝开发的网络中,位置和颜色数据被分开处理,从而正确感知模糊形状的变化,然后再通过对注意力机制(attention mechanism)进行加权后,用于控制亮度梯度上的焦点,以正确测量距离(图5)。通过学习,对网络进行更新,以减少测量距离和实际距离之间的误差。
图5 东芝开发的神经网络,用于单目摄像头的3D识别功能
东芝已证实,通过使用此AI模块,用市面上可买到的单目摄像头拍摄的单张图像,可实现与立体摄像头同样的测距精度。接下来,东芝将利用市面上的相机和镜头确认该系统的普适性,并加快图像处理速度,以期在2020年正式售卖。”
相关文章
- 东芝电视音质积淀再突破,帝瓦雷专项调校打造Z700QF影院级音效
- 日本声学巨匠携手法国音响传奇品牌,东芝Z700QF重构家庭音响新标准
- 联名帝瓦雷调校打造全新火箭炮SOUND:东芝Z700QF旗舰电视上市
- 东芝“大芝士”Z700QF来袭:内置独立双芯的日系音画旗舰
- 搭载行业独家音画双芯,东芝电视Z700QF于3月31日开启预售
- 东芝 Z600QF PRO震撼上市:音画双芯Mini LED重新定义家庭娱乐新标杆
- 音画独立双芯+日系匠心:万元旗舰东芝Z600QF PRO即将开启预售
- 东芝电视再获国际认可!2款产品斩获iF设计大奖
- 史上第一打造的史上最强有多强 东芝X20热泵洗烘一体机重磅上市
- 东芝电视CES 2025大放异彩 AI技术革新引领真实音画体验新高度
- 东芝官宣反町隆史担任品牌大使,共绘艺术品质生活新风尚
- 家居美学升级:东芝艺术电视LA,引领生活艺术潮流
- 行业唯一音画双芯“真香”神器 东芝电视“小芝士”炸裂视听盛宴
- 真双芯+真调校,家庭影音新标杆东芝电视新品Z750NF全新发布
- 东芝N300硬盘为企业构建高效创意工作流:NAS存储与多人协作方案
- 行业唯一原色调校Mini LED,东芝电视新品Z600NF正式开售