揭秘华为海思自研越影ISP:五大飞跃、黑夜变白昼
来源:快科技 发布时间:2021-12-29 13:08:26

华为海思的麒麟芯片受阻,但在其他领域,华为海思并没有止步, 最近就推出了全新的越影AI ISP , 用于物联网智能终端的新一代智能图像处理引擎 ,突破了传统ISP图像处理的极限,将画质推向新的高度。

ISP是对图像传感器输入的原始数据进行图像处理的首个环节,涵盖数十种图像信号处理算法。为了适配各种不同的镜头和传感器,需要优化调整成百上千个参数,保证ISP兼备通用性和灵活性。

同时,ISP中众多模块的算法是相互影响的,算法协同需要大量调试工作,极其复杂,也极具挑战。

面对越来越高的场景复杂度,基于滤波等传统图像处理技术在暗光、宽动态等场景下,画质获得显著改进越来越困难,而且随着参数库逐渐庞大,调试越发困难,开发周期逐步拉长,画质提升的投资收益率也越来越低。

近年来,利用AI进行图像增强,逐渐成为行业研究新热点,并取得了显著的进展,尤其是利用AI对静态照片的优化,已经广泛应用于高端手机的相机拍照,并获得了不错的效果。

上海海思利用在传统ISP画质技术上的积累和经验,以及在端侧AI架构和优化上的优势,打造了新一代智能图像处理引擎——越影AI ISP,将传统画质优化经验与AI技术深度融合,相比海思上一代旗舰ISP在五方面实现了飞跃。

【超感光降噪】基于深度学习的智能降噪,信噪比4倍提升

传统的NR降噪技术采用多级时域/空域滤波,且滤波器设计融合了多种异构类型,收益已逐渐降低。

海思利用神经网络深度学习海量低照度场景图片的噪声和信号的分布特性,训练出一套智能降噪的算法模型,越影AI ISP可以智能区分图像中的信号和噪声,实现低照度场景下的智能降噪。

根据测试,越影相比海思上一代旗舰ISP,在低照场景下的图像信噪比可提升4倍。

【多光谱融合】采用专用硬件加速,实现0.01Lux低照全彩

低照场景下,RGB传感器感光能力急剧下降,导致彩色图像清晰度快速下降,无法同时兼顾图像细节与色彩。

在夜晚交通管理场景下,往往需要在闸口加装爆闪灯来补充照明,容易造成光污染甚至影响驾驶员的行车安全

多光谱融合技术通过将可见光与红外光感知信息进行融合,在不增加光污染的同时,解决了低照环境下由于可见光感光能力不足所造成的细节损失的问题,实现图像色彩与细节的最佳平衡,最终使图像效果达到0.01Lux暗光全彩,细节纹理丰富。

【超级宽动态】自适应光线复杂变化,动态范围提升12dB

宽动态技术是逆光场景下提升画质的重要技术。

例如行车进出隧道口时,由于内外光强反差巨大,如何快速跟踪不断变化的光线,并准确对目标进行自适应曝光,是对自动和辅助驾驶安全非常重要的技术。

超级宽动态技术基于智能识别目标场景,对价值区域进行自适应多重曝光,通过智能算法融合不同曝光时间的长帧、中帧、短帧的图像数据,使图像获得暗、亮区域的完美融合:亮处不过曝、暗部细节不丢失,逆光场景所见清晰,暗光区域色彩饱满、细节丰富。

根据测试,越影相比海思上一代旗舰ISP,在逆光场景下动态范围可提升12dB,并且对场景跟踪更迅速,能够有效避免图像画面瞬间过暗或过曝,在3帧以内即收敛至稳定状态。

【超级稳像】6轴数字防抖,视频成像稳定性大幅提升

消费类摄像机广泛应用于运动场景的拍摄,但在运动中相机的震动会影响最终成像效果。

视觉感知设备被安装于自动或辅助驾驶汽车中,这样的抖动造成的图像模糊甚至可能影响驾驶安全。

越影的超级稳像技术基于IMU 6轴传感信息智能分析运动姿态,通过精准补偿修正动态视频,有效减少由于外部环境晃动或抖动对视频成像造成的影响,可大幅提升各种振动环境下的视频稳定性。

【多维度感知】多感知跨界融合,激发智慧视觉新潜能

越影支持RGB与雷达、红外热成像、3D结构光等多维度感知能力的融合,匹配红外测温、智能支付、扫地机器人、雷达视频一体机等多种产品需求,可广泛应用于交通管理、金融支付、工业视觉等多种业务场景。

【来源:快科技】【作者:上方文Q】

上一篇:

下一篇:

猜你喜欢

揭秘华为海思自研越影ISP:五大飞跃、黑夜变白昼

华为海思的麒麟芯片受阻,但在其他领域,华为海思并没有止步,最近就推出了全新的越影AIISP,用于物...更多

2021-12-29 13:08:26

比骁龙8 Gen 1仍要便宜30% 天玑9000价格曝光

昨晚小米发布了小米12系列手机,用上了骁龙8Gen1,这也意味着国产旗舰机拉开了2022年升级的大幕,不...更多

2021-12-29 13:08:16

大笔投资2300亿 台积电1nm晶圆厂有着落了

台积电今年初宣布了三年投资1000亿美元的资本支出计划,这是有史以来最具雄心的半导体产能扩张,力...更多

2021-12-29 13:08:02

内置全新MiSans字体上线:开放下载 免费可商用

昨天小米举行了新品发布互,小米12、新智能手表、MIUI13等集体亮相,你有心动的产品吗?更多

2021-12-29 13:07:55

RTX 3080 Ti移动GPU爆料:16Gbps显存

早前有传闻称,英伟达即将于2022年1月发布面向笔记本电脑的RTX30Ti系列移动GPU。现在,VideoCardz又...更多

2021-12-29 13:07:44

中芯国际:今年销售收入较上年预计增长 39%

有投资者在互动平台向中芯国际提问称,中芯国际自科创板上市以来总市值差不多跌去了一半,希望其能...更多

2021-12-29 10:51:29

微软正在为Windows 11开发新Mica视觉效果

援引科技媒体WindowsLatest报道,微软正计划在Windows11上开发测试“Tabbed”Mica特效。在Windows11...更多

2021-12-29 10:51:19

WSATools重新上架微软商城 开发者报告假冒问题

在多家媒体报道名为“Apk?Installer”的假冒应用上架MicrosoftStore之后,WSATools的开发者SimoneFr...更多

2021-12-29 10:51:09

微软正尝试修复Windows 11多个任务栏问题

任务栏是Windows11系统中最具争议的设计选择。重新设计的任务栏受到广泛批评,但好消息是,这家科技...更多

2021-12-29 10:51:00

Exynos 2200性能提振幅度不大:CPU提高5%

三星明年推出的Exynos2200旗舰芯片组将得到AMD的大力支持,可以预期在GPU方面会有较大的提升。然而...更多

2021-12-29 10:50:50


© 2012-2020 财经快报网 版权所有

网站联系邮箱:98 28 36 7@qq.com