眼下虽然春节假期已经过去,很多小伙伴们已经结束假期回到工作岗位,但在传统的习俗里,直到正月十五,春节才算真正结束,年也才算过完。因此,尽管工作已经开始,但过年那份喜庆的心情却远不能丢失。更何况,一定还有擅长拼假的朋友,当帅气的小编已经开始辛勤码字的时候,仍然躺在家中的沙发上享受余额还有好几天的新年假期。

当然啦,过年的时候也不能一直宅在家里。春节期间,天气已经不像年前那么寒冷,今年过年虽然不太能出远门,但偶尔和家人在周围的公园走一走玩一玩,寻找春天,也是非常惬意的事情。

和家人出去游玩,肯定少不了要拍照。好在现在智能手机的拍照水平已经十分强大,日常外出留影完全可以替代笨重的相机。更重要的是,如今智能手机在 AI 计算摄影的加持下,可以实现相机没法做到的趣味化拍摄功能,能够为家人带来额外的乐趣。

说到独特的趣味化拍摄功能,自然离不开手机的 AI 能力,而 AI 能力,则又依托于芯片的 AI 性能。当前安卓阵营的手机芯片中,骁龙 888 移动平台当属性能标杆,这里的性能不仅包括 CPU 的运算性能,更包含了 AI 能力。

今天我们不妨就来看看,借助骁龙 888 的 AI 能力,大家可以用智能手机在春节期间怎样 “拍出花”。

第六代 AI Engine,骁龙 888 手机 AI 能力的基石

正如我们开头所说,骁龙 888 移动平台拥有标杆级的 AI 能力,主要体现在哪里呢?这是我们首先要弄清楚的问题。

具体来说,骁龙 888 移动平台搭载了第六代人工智能引擎 AI Engine。关于 AI Engine,相信小伙伴们已经非常了解,这里IT之家就不赘述了。我们主要看第六代 AI Engine 有哪些升级。

首先,第六代 AI Engine 最大改进,莫过于重新设计的 Hexagon 处理器,它采用了融合 AI 加速器的架构。所谓融合 AI 加速架构,就是说在之前骁龙 865 的 Hexagon 处理器中,有标量、张量和向量加速器,但他们是分开的,而在骁龙 888 的 Hexagon 780 处理器中,这些加速器之间的物理距离几乎消失了,就像融合在一起一样。

不仅如此,高通还在这三个不同加速器之间添加了很大的共享内存,从而让他们更快、更高效地共享和移动数据。高通称,专用共享内存的加入让 Hexagon 780 在单一应用中的性能提升 16 倍,在某些应用中,数据交互时效最多可提高上千倍。

具体到这些加速器自身,其性能也得到了提升,标量加速器的性能提升了 50%,而张量加速器的处理速度是前代的 2 倍,更重要的是,在性能上涨的同时,它们还提升了每瓦特性能,能效相比前代提升 3 倍之多。

在全新 Hexagon 780 处理器的加持下,骁龙 888 的 AI 性能可以得到非常明显的提升,毕竟我们知道,Hexagon 处理器是 AI Engine 引擎中专门用来辅助 AI 运算的组件,它的 AI 处理能力升级,对骁龙 888 整体来说非常重要。

当然,在第六代 AI Engine 中,另外两个关键处理核心 CPU 和 GPU 的升级也不遑多让。其中,Kryo 680 CPU 采用了全新 CPU 架构,是行业首个用上 ARM Cortex X1 架构的移动 CPU,在它的带动下,CPU 整体实现了 25% 的性能提升,同时 CPU 丛集的整体功耗控制效率也提高了 25%。

而 Adreno 660 GPU 的图形性能相比上一代 Adreno 650 提升了 35%,能耗相比于上一代则降低了 20%。在参与 AI 运算时,Adreno 660 GPU 的 AI 性能也有 43% 的提升。

以上种种部件的性能提升,让第六代 AI 引擎的算力达到了 26 TOPS,相比上一代的 15 TOPS 有巨大的提升。

此外,在第六代 AI Engine 架构中,还整合了高通第二代传感器中枢。今年的第二代传感器中枢中,高通增加了一颗专用的、始终开启的、低功耗的 AI 处理器,令传感器中枢 AI 性能提升达 5 倍。这种额外的 AI 处理能力使 Hexagon 处理器可以将高达 80% 的工作负载分担给传感器中枢,从而做到更加省电。高通传感器中枢进行所有处理所需的功耗仅仅不到 1 毫瓦。

因为本文主要说拍照功能,所以这里小编也特别为大家介绍第六代 AI Engine 在辅助拍照功能方面的努力。简单来说,就是和骁龙 888 移动平台中的 Spectra 580 图像信息处理器的 “合作”。

Spectra 580 CV-ISP 是高通首个支持三 ISP 的图像信息处理器,可以让手机上的多摄像头进行三重并发和三重并行处理,从而衍生出很多应用,同时,Spectra 580 处理速度比上一代快 35%,可以每秒处理 27 亿像素。

Spectra 580 ISP 还支持单帧逐行 HDR 传感器的传感器技术,可以帮助手机拍出更强大的 HDR 照片,

当这样的像素处理能力遇到第六代 AI Engine 后,就可以衍生出很多有趣的相机功能玩法,当然,也可以助手机拍出更高品质的照片。

Spectra 580 ISP 还支持高通全新的低光架构,速度结合骁龙 888 平台的新一代 AI 引擎,可以大幅提升低光环境下照片的拍摄能力,只要 0.1Lux 的照度,拍摄出细节惊人的照片。

围绕骁龙 888 AI 拍照的机理,IT之家已经讲解了很多,那么它在实际应用中,究竟能让智能手机实现怎样有趣且强大的 AI 拍照玩法?小编不妨举几个例子和大家一起感受一下。

AI 影像玩法实测,让春节假期既有趣又温暖

目前市面上搭载骁龙 888 移动平台的手机还不算太多,其中小米 11 和 vivo X60 Pro + 都是在拍照功能玩法上比较有看点的,因此我们不妨以这两款手机为例来体验。

首先是小米 11,这款手机有一项独特的 AI 魔法换天功能,当你用小米 11 拍摄风景照时,对天空不太满意,就可以使用这个功能来更换天空,从而让照片呈现你想要的氛围。例如IT之家拍摄的这张照片,小编觉得天空比较阴沉,想换个晴天的天空,就可以选择 “晴天”。

可以看到,换成晴天后,不仅是天空变了,山坡的亮度也随之提升,以契合晴天的感觉。

放大照片,也基本看不到抠图的痕迹,即便是复杂的树枝边缘,也几乎没有违和感,可见其背后 AI 识别能力之强。

换一个场景,下面这张照片中,天空的比例比较小,并非画面主体,换天的难度是将天空准确识别出来。小编为其换一个夕阳的天空,从结果上可见,小米 11 成功将天空部分准确识别了出来,而且楼房、墙体也加入了暖色调,以适应夕阳的氛围。

在 AI 魔法换天中,除了可以给照片换天,还可以为照片加上天气等特效,变成一段短视频,这就更加考验手机的 AI 识别和处理能力了。

还是以上面这张照片为例,小编为其加上了一个 AI 烟花的动态特效,在楼房的遮挡下,烟花只在一小片天空中绽放,而且随着烟花照亮夜空后熄灭,楼房的亮度也跟着明暗交错,整体看起来氛围感非常完整。从这些细节中,我们也能看到骁龙 888 有着出色的 AI 能力。

可以想象,当你春节假期和家人外出游玩,给亲戚们拍合照,如果天气不好,就可以随手换个天,非常方便。

除了这些,小米 11 还有一个比较重要的功能,就是极暗光环境下的视频超级夜景。通常我们拍照时会用到夜景模式,背后其实也有 AI 成像优化算法的加入,不过照片的夜景模式通常只是围绕一个画面场景进行一帧或者多帧的像素优化,而视频超级夜景则需要连续不断地对海量夜景画面帧进行实时的像素优化,这对 AI 算力的要求可想而知。

在实际表现中,小米 11 的视频超级夜景效果的确很明显,从下面的视频中可以看到(视频拍摄于暗房),在普通模式下,花朵的绿叶基本已经黑的看不清了,花朵本身也因为极暗光而显得黯然失色,不过在超级夜景模式下,整个画面的亮度提升了不止一个档次,绿叶完全可以看清,而且绿色的饱和度也很高,花朵更是如此,细节、亮度、饱和度都有了肉眼可见的提升。

有了视频超级夜景的功能,过年期间如果家里放烟花,就可以用小米 11 捕捉烟花开放的美丽瞬间,在过去普通模式下拍摄,可能很那拍到烟花的细节,而视频超级夜景模式下,无论是周围的环境还是夜空中的烟火,都可以很好地呈现。

说到超级夜景,另一款骁龙 888 手机 vivo X60 Pro + 也有不错的表现。其支持的超级夜景模式拍照功能,同样能拍出强大的夜景照片。

例如下面这组样张,标准模式下,成像质量已经不错,画面的亮度和纯净度都有很好的保持。但是在夜景模式下,照片质量就更强了,无论是色彩、细节还是纯净度等方面,都完全不像是夜晚拍摄的。

能够做到这些,是因为 X60 Pro + 拥有自研 RAW 域 AI 空域降噪技术,搭配骁龙 888 的 AI 性能,在拍照时可对单帧 RAW 图进行空域降噪;通过海量 AI 学习识别画面高中低频区域进行不同程度的降噪,在提升画面纯净度的同时,尽可能地保留画面中高低频的细节。最终得出一张在各方面都很出色的夜景照片。

在拍摄人像的时候,我们经常会遇到逆光的环境,结果不是将人脸拍得暗淡无光,就是背景明显过曝。在 vivo X60 Pro + 上,也利用 AI 性能对人像拍摄进行了优化,特别是在逆光的环境下。IT之家也用其进行了测试。

测试时,小编选择了一个大逆光的环境,然后用 vivo X60 Pro + 的人像模式进行拍摄,大家可以看下面这张照片,其实人像面部细节还是非常清晰的,背景的虚化也比较到位,可见 X60 Pro + 本身就有不错的人像拍摄算法。不过这张照片美中不足的是背景有些过曝了,特别是天空的部分。

打开 X60 Pro + 人像模式中的 AI 功能,然后再拍摄一张,这一次可以看到,人像的抠图明显比刚才精细了很多,然后人物面部分光线也更加自然,不过,最明显的变化还是背景天空的高光明显被压制了,太阳几乎变成了一个白色的圆点。整张照片看起来变得更加自然、舒适。

这种高逆光环境下的人像优化效果,显然是 vivo AI 人像算法和骁龙 888 第六代 AI Engine 强强合作的功劳。在这种极端环境下能拥有这样的拍摄成片,可以说,春节期间无论和家人去哪里玩耍,基本上都可以拍出让人满意的照片了。

最后,关于 vivo X60 Pro + 的 AI 用例,还有一个有趣的玩法,叫做旧照修复。这个功能可以针对低分辨、不清晰、模糊有噪点等画质差的图片,进行一键修复调优,让它变成一张清晰度更高、质量更好的照片,同时针对老的黑白照片,还可以一键修复上色。

首先使用 vivo X60 Pro + 相册 “编辑 - 修复”功能中的 “超清图像”,然后 X60 Pro + 就会进行 AI 运算,对照片进行修复,修复之后的照片,可以看到放大之后,人物的脸部细节更加清楚了。

超清修复之后,还可以对照片进行上色。上色后的照片整体观感还是非常自然的,感觉就像是老式彩色相机拍出来的,基本上没有后期调的痕迹,虽然颜色不一定就是准确还原拍照当时现实的色彩,但如果能让老照片重新换发色彩,也一定能唤起很多人幼时的回忆。

有了这个功能,春节和家人相聚期间,拿出家里的旧照,高清修复一下,和父母兄妹一起看,也不失为一种增进情感的方法。

总结

目前 AI 技术在智能手机影像方面的应用显然还不止这些,而且随着 AI 技术的日益成熟,它更有可能成为未来手机的核心功能,并衍生出更加丰富实用的功能玩法,推动智能手机向真正的智慧手机进化。

当然,对于高通来说,想要实现这一目标,除了要推动 AI Engine 的持续进化,还需要团结更广泛的开发者。这一点高通也已经意识到了,例如在骁龙 88 的第六代 AI Engine 上,他们就推出了高通 AI 引擎 Direct,为整个移动平台带来统一的 Direct 应用程序接口的能力。通过这个解决方案,高通扩展并增强了其 AI 软件解决方案的功能,为开发者提供了直接访问硬件的途径。

此外,高通还扩展了用于 AI 加速器的开源编译器 TVM,支持 Hexagon。现在,开发者可以用几行简短的 Python 代码编写自定义算子,为 Hexagon 编译,并直接插入高通 AI 引擎 Direct 框架。这些都是方便开发者的有利举措。

既有 AI 底层软硬件支持,又可连接上游终端厂商和广泛开发者,这些可以说是高通骁龙移动平台在 AI 发展之路上的一大优势,这种连接整体生态的能力,无疑将在时代浪潮中推波助澜,让那个属于 AI 的时代更快地到来。

关键词: ai拍照 计算摄影 智能手机