联发科Helio P90的AI降噪 夜拍抓拍或成差异化竞争力
2019-03-20 16:58:19爱云资讯阅读量:755
这两年AI拍照成为行业热词,但实际上AI拍照早已经不是全新概念、目前结合AI的算力已经可以让拍照实现快速美化、物体识别、人脸替换、动作抓拍等等,在交互和娱乐方面, 主流手机厂商之间的差异并不大,真正考验拍照实力的其实是面对受限场景和动态对象的成像表现,例如夜拍、抓拍等,要突破考验不再仅是软件优化问题,同时也对背后芯片厂商的硬实力提出要求。
以联发科最新的Helio P90芯片为例,我们发现其对夜拍降噪技术上提出了一个新的AI解决方案。根据官方数据显示,P90相对于传统技术可有效提升夜间拍照画质,信噪比提升 25%,大大增强了出片质量,而其背后依靠的就是千兆级AI算力,而关键的是这可能会提升今年手机夜拍的体验。
传统夜景拍摄方案:多帧合成降噪,容易造成细节损失
为了满足在弱光环境下的拍照需求,不少手机厂商都会加入所谓的弱光拍摄、夜景模式等,希望能以算法来加强成像质量。通俗地说,就是手机在夜拍时,会默认拍摄多张照片,然后从多张照片中进行噪点数量的计算以及噪点位置的筛选,将有噪点的地方用没有噪点的帧数替换位置,经过反复加权、替换,就得到一张相对干净的照片,最终成像的照片是由多个帧数的图像合成的,所以绝大部分夜拍照或抓拍照中均可见到物体的重影,这就是影像合成所带来的一定副作用。
这种处理方式固然能对噪点有一定的控制,但是由于使用的算法不同,且要消除的噪声量也不同,导致降噪处理会在低对比度细节方面有损失,也就是纹理损失。一定程度上消除了画面噪点,但是细节上的丢失也让传统降噪技术成为了一种拆东墙补西墙的方式。降噪的效果也成为客观图像质量评估的一个重要部分,降噪效果对于能否在手机端实现高质量夜拍与抓拍功能起了决定性作用。
目前业内对夜拍降噪的做法大部分是通过ISP(图像信号处理器)和DSP(数字信号处理器)以及软件算法的多方配合形式来实现,其中ISP主要就是针对夜景中的曝光、白平衡、色彩校正等进行矫正处理,而在ISP在处理完数据后,会将其转交给DSP进行图形计算负载,这里就包括针对图形部分的增强处理,例如强化暗部细节、图片合并执行等,可以接管原本属于CPU或GPU处理的工作,并降低功耗。
相机的常见标准作业流程,ISP在其中扮演了相当重要的角色。(图/网络)
高通、联发科、海思、三星等一众厂商早期都是采用这样的方式,甚至基于ISP后期还延伸各式各样的结构优化,以往多款基于高通骁龙旗舰平台的智能手机在拍照上都有不错的表现。
AI图形增强,强大算力和智能算法在拍照上的智能应用
不过由于ISP、DSP信号处理器等也如同CPU般,同样面临硬件能力增长匮乏的问题,所以不断升级ISP来增强夜景拍照并不是一个切实可行的方式。而在目前AI算力大幅提升的环境下,使用AI进行图形智能化增强,在结合大数据深度学习,其效果已经比传统的ISP/DSP优化更加出色,而这也就是联发科Helio P90的AI降噪抓拍思路。
根据数据显示,Helio P90的AI运算性能已经高达千兆级, APU 2.0强大算力,用户在暗光环境下拍摄照片时产生的画面偏暗、噪点多等问题,都可以通过人工智能学习模仿高画质数码相机的成像特性,通过算法将周遭环境噪点进行覆盖,提升背景光特征,实现了类似传统相机ISO降2-3档的效果,在抓拍画质上藉由3毫秒水准的曝光时间,最大限度的保留了原有的细节纹理和画面纯净度,使画面品质得到整体提升。
使用Helio P90的手机进行夜间拍照时,AI会预先分析背景的物体和光线,显示锁定拍照主体来保证整体效果,紧接着开启AI对画面噪点和明暗度的调整,在你点击拍照的同时,实际上系统已经预先完成了大量的画面计算和噪点分析,并进行智能化像素补充,实现AI降噪的过程。当然同样的还有夜间抓拍,AI会辅助进行多张图片的拍摄,从而分析动作、画面明亮度、阴暗细节等,自动补充合成为一张最稳定和纯净的动作抓拍。
目前相机在ISP、DSP和AI人工智能上的共同协作算法。(图/网络)
目前消费者已经愈发看中手机拍照在夜间的表现,我们猜测,Helio P90首发产品应该会搭配4800万超高清摄像头,带给消费者一款包含有AI降噪, 抓拍等功能在内的真AI相机,并掀起一轮拍照画质提升的革命。
相关文章
- Find X8系列发布,OPPO与联发科双强携手重新定义深度联调
- AI与游戏性能齐飞,OPPO与联发科共创Find X8系列极致体验
- OPPO与联发科联手发力AI手机新品,再度引领行业
- 传音控股与联发科技携手共建人工智能联合实验室,加速推进端侧AI技术创新
- 联发科车芯放大招!天玑汽车座舱平台CT-Y0顶尖性能盖帽安兔兔榜单!
- 三星于联发科技天玑旗舰移动平台完成其最快LPDDR5X验证
- 2024 MWC上海,罗德与施瓦茨联合联发科技共同演示Sub-6GHz下行三载波聚合测试
- 联发科合作Discovery探索频道,天玑旗舰影像以专业无畏的创新赋能“大片”制作
- 广和通携手联发科技推出基于FG370和Filogic 660 Wi-Fi 7芯片组的5G CPE解决方案
- 生成式AI手机应用普及加速!联发科天玑芯片、模型、应用全方位疾速驱动
- COMPUTEX 2024联发科大秀AI狠活,全场景AI体验就在现场
- 联发科亮相COMPUTEX 2024,端侧生成式AI技术展示重磅亮相
- AI成COMPUTEX新风向,联发科生成式AI硬实力太抢眼
- 联发科AI关键技术遍地开花,COMPUTEX 2024 全方位AI体验引爆全场!
- 联发科深度参与设计ARM最新旗舰架构,天玑9400用顶级全大核碾压行业
- 联发科出大招:参与设计Armv9新架构 天玑9400旗舰CPU性能能效碾压对手