当前位置:静雅生活网 > 数码百科 >

​ vivo 影像发布会:X90 超大底主摄 / 长焦升级与新自研 ISP 预告

导读:10 月 24 日,vivo 举行了今年的影像战略发布会,按照上年习惯,这基本就是 vivo X90 系列影像部分和 vivo V2 自研 ISP 的预告了。此外,vivo

  10 月 24 日,vivo 举行了今年的影像战略发布会,按照上年习惯,这基本就是 vivo X90 系列影像部分和 vivo V2 自研 ISP 的预告了。此外,vivo 宣称已经有超 1000 人摄影研发团队,1200+ 影像技术专利授权。

​ vivo 影像发布会:X90 超大底主摄 / 长焦升级与新自研 ISP 预告

  省流概括:

  (X90 系列)将采用新一代的 CMOS,感光能力比 GNV(1/1.3 英寸级)提升 77%,就差点名是索尼 IMX989 了(1 英寸 +)

  长焦会有恢复 35% 清晰度信息的光学超分算法,5 倍以上的解析力提升 64%

  蔡司等效 50mm 2 倍人像,人物主体分割宣称 IOU 达到 96.15%,前置微缝双柔光灯(应该是 S 系列的?)

​ vivo 影像发布会:X90 超大底主摄 / 长焦升级与新自研 ISP 预告

  而 vivo 下一代自研 ISP(最终命名未知,暂定叫 vivo V2 吧),换成 AI-ISP 架构,定制 10bit MAC 电路,10bit 运算推理延迟较传统 NPU 最多降低 96%,能效比最高提升 200%。

  片上内存升级成 DDR-Less 片内近存,1.3 万亿 bit 每秒吞吐峰值。

  AI 计算单元的 DLA(即 Deep Learning Accelerator 深度学习加速器)有共享 SRAM,每瓦 16.3TOPS/W(台积电 6nm 工艺的马里亚纳 X 是 11.6TOPS/W,18TOPS 峰值)。

  图像处理单元提升了 AI-NR 降噪、HDR 影调融合、MEMC 插帧等算法效果,宣称夜景视频最大提升 4EV 动态范围,降噪效果提升 20%。

​ vivo 影像发布会:X90 超大底主摄 / 长焦升级与新自研 ISP 预告

  影像算法和效果上,对比 X80,白平衡准确性提升 8%,智能白加黑减(曝光)提升 14%。最高 102400 的 ISO,提升 100% 的夜景。对比 IMX866,信噪比提升 20%,色彩还原能力提升 15%。视频方面,支持 BT2020 色彩空间,有 10bit LOG+3D LUTs。

  官方算法说明

​ vivo 影像发布会:X90 超大底主摄 / 长焦升级与新自研 ISP 预告

  vivo 把自己的影像技术分为 7 部分:光学感知系统、臻彩还原引擎、超清画质引擎、算力加速引擎、环境理解技术、超感人像系统、苍穹夜景系统。

  【光学感知系统】

  光学感知系统包括光学模组和镀膜等技术。比如 VCS 仿生光谱技术,通过改善 Sensor QE 光谱,提升信噪比和色彩还原能力,让传感器接收的原始信息不断接近人眼,打造良好的成像基础。

  【臻彩还原引擎】

  主要支撑技术为智能 AWB 和智能白加黑减,能够提升白平衡准确性和大面积 " 白 "" 黑 " 场景的曝光准确性,将 vivo 的色彩表现和影调观感优化到极致。

  【超清画质引擎】

  超清画质引擎的典型技术为光学超分算法,通过对镜头的缺陷建模分析,恢复了约 35% 的损失信息。光学超分算法是实现超清画质的起点,引擎中还有 Denoise、Demosaic、Deblur 等模块,进行耦合训练,形成了系统性的 AI 画质方案——超清画质引擎。可以实现多帧画质重建,达到更好的画质和更广的动态范围。

  【算力加速引擎】

  算力加速引擎,是一套软硬结合的加速方案,vivo 基于自研芯片和平台 SOC 设计研发了 CV 异构加速引擎和 vDNN 深度学习加速引擎,是分别针对传统 CV 算法和 AI 算法的加速引擎,可支撑多芯结合的异构加速,实现多信息协同并高速处理。

  【环境理解】

  环境理解会对场景进行识别,比如色温和亮度检测的技术、运动检测的技术,基于环境的进行信息提取,协助 3A 等模块,作出最佳的拍摄判断(3A 技术即自动对焦 ( AF ) 、自动曝光 ( AE ) 和自动白平衡 ( AWB ) )。

  【超感人像系统】

  超感人像系统三大核心技术模块:人像理解、人像美化、人像氛围。

  先是人像理解——像摄影师一样读懂人像信息。vivo" 人像理解技术 " 会像专业修图师一般进行分区检测,对人脸进行语义重点和轮廓细节的提取,建立多达 103 个特征点的关键人脸坐标,点位精度误差小于 2 像素。同时,会对画面中的皮肤、手势、肢体关键点进行检测,主体分割 IOU 达到了 96.15% 的精确度,为静态人像重塑和动态人像抓拍提供了精细化的处理能力。

  第二步是人像美化——微米级人像细节美化。以不同年龄、性别、场景的数以百万计的素材,经过反复的机器学习成长,推出 vivo 全新升级的微米级焕肤塑颜技术,使皮肤观感更加自然、健康,也更好地保留了五官的立体感。

  第三步是人像氛围——营造独特的氛围感。" 人像氛围融合 " 技术,基于人像语义理解,在影调、色彩、亮度、虚化等层面上进行人与场景的融合处理,实现人与景和谐、自然的效果。

  【苍穹夜景系统】

  进行 AI 升级,基于百万夜景照片训练出三个全新模型:超感光模型、全分割语义模型和臻彩影调模型。超感光模型:将感光能力最大提升了 100%,ISO 最高可支持 102400;全分割语义模型和臻彩影调模型联合,实现了自适应的影调和色彩调整能力。

   你可能还想看

  爱搞机官网

  www.igao7.com

  放马过来!无惧点击的 " 赞 " 和 " 在看 "

版权声明:本文部分来自互联网,由小编精心所写,本文地址:http://www.zhubian88.cn/smbk/66544.html,如需转载,请注明出处!

联系我们

在线咨询:点击这里给我发消息

微信号:weixin888

工作日:9:30-18:30,节假日休息