创客100
当前位置: 主页 > 硬件 > >> 正文

第二代骁龙8影像技术升级,可结合AI认知IS

2022-12-05 17:21 来源:PChome电脑之家     

  骁龙影像技术作为骁龙六大创新矩阵之一,对手机的体验有着极大的帮助。在最新发布的第二代骁龙8移动平台中,骁龙影像技术继续带来了颠覆性的技术升级,与AI深度结合后首创了“认知ISP”,它使得手机能够看懂并理解世界,将图片细分为多个不同的区域并进行分别优化处理。

  认知ISP提高了手机影像能力,并且很可能成为未来手机拍照的基础功能,提高所有手机的拍照下限能力。而在视频拍摄这条赛道上,第二代骁龙8也带来了新的变革,有望将8K视频录制功能铺开。

  手机8K视频推进历程

  8K视频指的是分辨率达到7680x4320的视频内容,其像素数大概是3317万,手机拍摄8K视频要求镜头的像素数必须高于这个数字,在2018年首发的4800万像素镜头满足了这个硬性要求。 视频录制需要每秒至少30帧的画面来确保流畅性,这就对ISP的运算能力提出了要求,每秒的处理能力要达到10亿次才行。

  骁龙865就提供了8K视频拍摄能力满足3317万以上的像素数以及每秒10亿次的像素处理速度,理论上就具备了8K视频拍摄的能力。在2019年推出的骁龙865移动平台,像素处理能力达到了每秒20亿像素,首次提供了8K视频录制功能。并在之后的两代骁龙8移动平台中不断升级,将动态范围提升了4000多倍,使8K视频可以进行HDR+拍摄,提供超过10亿色的丰富色彩效果,让视频效果更为生动,观看者能够感受到身临其境的效果。

  骁龙移动平台的8K视频拍摄能力,已经得到了专业人士的认可。骁龙方面与国家地理合作了多年,使用骁龙平台手机拍摄了多部8K纪录片,影片记录了大自然的灵动和生机,效果十分顶级,如果不提前告知,肯定会让人感叹使用手机居然能拍出如此专业级别的影片。

  8K视频拍摄普及任重道远

  骁龙手机已经解决了手机能不能拍8K视频的问题,但在普通消费者手中,依然还不够普及。原因也很简单,普通用户无法如专业人士那样,通过专业设备和知识,完美的发挥设备的拍摄能力。

  现在手机的视频录制功能十分丰富,在算法支持下,实时视频背景虚化、滤镜、防抖、美颜等均能轻松实现,夜景视频在算法支持下的拍摄效果也相当不错,在逆光拍摄下的HDR拍摄能够让人和景都清晰自然。然而上述的这些功能支持,基本全都无缘8K视频拍摄模式。

  SoC算力不足或是附加算法后的功耗和发热问题,使手机8K视频录制基本全都是依托芯片ISP能力的直出效果,这种拍摄方式在专业人士手中可谓如鱼得水,但普通用户需要的是更简单的拍摄方式,最好是能如同照片拍照那样,随手拍出来就能用。

  认知ISP的出现给我们带来了希望,在第二代骁龙8移动平台中,高通在Hexagon处理器和Spectra ISP之间,增加了一个名为“Hexagon直连”的物理连接,在两者之间创建直接通道,从而在影像算法的处理上都能在ISP内部完成,让AI在影像中的运算效率大幅提高。

  这种高效的AI能力,改变了神经网络的处理方式,以往神经网络往往是在照片和视频拍摄完成之后才运行,处理起来既费时又耗电。认知ISP则可以在拍摄照片和视频时实时运行,甚至在拍摄之前就能够运行算法,不仅处理更为及时,而且还能从取景器中看到算法处理后的画面,获得所见即所得的拍摄体验。

  与传感器制造商密切合作

  为了获得更出色的拍摄效果,高通方面还与传感器制造商进行了深度合作,对传感器进行了调优。2亿像素的三星HP3传感器,能够在骁龙平台上支持采用re-mosaic像素重排技术实现高分辨率照片拍摄,极大提升照片的清晰度表现。视频录制上,提供高动态范围的单帧逐行HDR模式和8K超清模式拍摄。

  与索尼方面的合作,则全面调优了IMX800以及1英寸大底IMX989两颗传感器,这两颗传感器首次采用了QDOL4技术,在视频录制时,每一帧融合4次曝光,为视频拍摄带来极致的HDR效果。可以将光线最暗处和最亮处的细节呈现在同一画面上,而且没有噪点,特别适合逆光也夜景场景的视频拍摄。

  三星HP3、IMX 800和IMX 989三颗传感器,全都是接下来手机市场的主流主摄配置,2023年款的手机将会大量使用这三颗传感器,在与骁龙平台的合作调优下,视频拍摄能力就很值得期待了。

  解决实际问题

  8K视频的普及,是个生态化的大工程,虽说现在还面临着诸多难题,但在第二代骁龙8中,还是解决了一些实际问题。

  第二代骁龙8提供了8K 60帧视频播放能力,使手机能够完美的还原8K视频传播链路,使用骁龙手机即可完美还原出原汁原味的8K视频视觉效果。

  8K视频的分辨率是1080P视频的16倍,所占据存储空间也是直线上升,我们使用手机录制10秒的8K 24帧视频,就占用了135MB的存储空间,对于128GB存储的手机来说根本吃不消。占用空间大带来的不止是手机存储的困境,对视频的传输也是问题,它意味着需要更高的网络带宽才能流畅在线播放,随之带来的传输成本,流量使用等,都在阻碍着8K视频的普及。

  第二代骁龙8则提供了AV1编码,这种编码方式相比目前常用的H.265编码,在相同的视频分辨率前提下,能够让存储空间占用减少20%,比起谷歌使用的VP9编码,码率降低30%,可以显著降低视频体积,缓解手机存储压力。

  现在很多流媒体网站中,都采用了AV1视频编码了,其相比HEVC编码的优势十分明显,可以节省大量的网络带宽。不过对于用户来说,AV1解码对处理能力要求高,如果没有硬件优化进行硬解的话,那么观看AV1视频会让处理器压力剧增。第二代骁龙8提供了AV1编码的硬解支持,AV1视频编码和解码均更具效率,而且发热比软解明显降低。

  可以预见的是,开源的AV1编码,必将是未来视频传播的主要编码方式。能够支持该编码的第二代骁龙8,已经未雨绸缪,让我们可以随时感受8K视频带来的震撼。

  结语

  8K视频作为目前视频传播的最高标准,想要完全普及到大众层面,需要全行业共同推进。骁龙移动平台在8K视频的拍摄和播放上,已经在好几代新品中不断出新,丰富8K视频拍摄体验。

  诚然,现在的8K视频拍摄还不够完美,但绝对是可用的,用来进行有一定专业性的拍摄,一部第二代骁龙8手机肯定能用。

免责声明: 创客100遵守行业规则,本站所转载的稿件都标注作者和来源。 创客100原创文章,请转载时务必注明文章作者和来源“创客100”, 不尊重本站原创的行为将受到创客100的追责,转载稿件或作者投稿可能会经编辑修改或者补充, 如有异议可投诉至:admin@100tmt.com