最新的 iOS 更新如何让 iPhone 11 的相机变得更好

最新的 iOS 更新如何让 iPhone 11 的相机变得更好
iPhone 11 Pro Max 相机通过最新软件更新进行了升级。Stan Horaczek

很难知道智能手机相机内部发生了什么。每次按下按钮拍照时,整个计算机化的鲁布·戈德堡式事件链就会启动,目的是尽可能多地捕捉图像信息。这样,强大的处理器就可以把所有信息塞进一个珍贵的记忆中,或者一张乌龟咬你朋友手指的搞笑照片中。

本周,苹果在 iOS 13.2 软件更新中为 iPhone 11 推出了新的 Deep Fusion 相机技术。对于普通用户来说,在某些条件下拍摄的照片现在看起来会更细致,噪点也会更少。应用程序中没有像相机模式那样的指示器,所以你甚至不知道它是否正常工作。但是,这些细微的改进需要一些严肃的工程设计——以及大量的处理能力——才能实现。

什么是深度融合?

上面的图片来自 iPhone XS max(没有 Deep Fusion),而下面的图片来自 iPhone 11 Pro Max。下面的图片颜色更好,细节也更明显。Stan Horaczek

当你打开 iPhone 的相机应用时,它会在你按下快门之前拍摄照片。它会保留一个滚动的图像缓冲区,一旦你按下按钮或点击屏幕,它就会总共拍摄九张照片。其中八张是在你按下按钮之前拍摄的。其中四帧很短,可以抵御相机抖动或照片中物体的运动模糊,使照片尽可能清晰。缓冲区中的其他四帧是标准曝光,用于捕捉颜色和细节。第九帧是长时间曝光,以引入更多光线并为处理器提供更亮的图像。

目前,Deep Fusion 和智能 HDR 技术的工作原理基本相同。但是,从这里开始,Deep Fusion 会选择四张短曝光中最清晰的照片,并基本放弃其余照片。然后,它将这四张标准曝光与长曝光融合在一起,以获得成品照片中应有的颜色和高光。

整个过程似乎是瞬间发生的,其存在是为了给 A13 仿生芯片提供所有原材料,以便将它们打造成看起来像真实的东西。对 Apple 最新处理器的依赖是目前只有 iPhone 11 用户可以使用 Deep Fusion 模式的原因。

Deep Fusion 使用其神经引擎来分析场景中的各个像素及其在画面中的关系。它可以挑选在哪里尝试保留高光,在哪里增加对比度以使细节看起来更加明显。

在我看来,锐化效果是 Deep Fusion 和智能 HDR 照片之间最明显的区别。高端修图师在平滑照片中的皮肤时,会使用一种称为频率分离的技术,这种技术可以将图像的精细细节和边缘与颜色和色调分开,并单独处理它们。因此,如果你想去除脸部照片中的瑕疵或问题区域,你可以做到这一点,而不会失去皮肤的自然纹理或颜色。

左图来自 iPhone XS Max,右图是使用 Deep Fusion 的 iPhone 11 Pro Max。锐化效果在我的胡须和面部皱纹中表现得最为明显,这些皱纹表明我患有季节性过敏症,而且睡眠不足。Stan Horaczek

Deep Fusion 做了类似的事情。它从其中一张短图像中提取细节和锐利边缘,同时从标准曝光和长曝光的混合图像中提取颜色和光线细节。这允许神经引擎单独调整事物。因此,如果你拍摄一张留着胡子站在蓝天前的人的照片,它可以从短图像中提取额外锐利的细节和较暗的天空色调,并从较长的曝光中提取脸部本身的亮度和颜色,使事物变得更亮。

寻找什么?

你可能听过网上有人把 Deep Fusion 称为“毛衣模式”。这个绰号源于苹果最初的 Deep Fusion 样本照片,照片中人们穿着毛衣。这些羊毛服装实际上是 Deep Fusion 的完美展示,因为它们在小空间中塞满了许多精细的纹理和图案。Deep Fusion 擅长绘制这些小细节

看看本文前面的室内植物叶子底面的图片。与 iPhone XS Max 相比,iPhone 11 Pro 相机能更清楚地展现出这些复杂的结构。

在色彩和对比度方面,Deep Fusion 图像看起来不像 XS Max 的照片那样平坦。我一直觉得 Apple Smart HDR 在平滑阴影和高光方面有点过于热衷,所以 Deep Fusion 在这方面有所改进。

然而,锐化性能却令人好奇。对于复杂的自然场景来说,这完全是合理的。额外的细节在风景或其他复杂场景中效果很好。有时在我看来,它看起来有点过于锐化,但我也形成了对 35 毫米胶片的品味,这是一种完全不同的——看起来不那么清晰的——野兽。

上面的照片(未使用 Deep Fusion 的 iPhone XS Max)具有足够的清晰度和细节,但下面的照片(使用安装了 Deep Fusion 的 iPhone 11 Pro Max 拍摄)则更上一层楼。Stan Horaczek

然而,当你拍摄一个人的照片时,Deep Fusion 的效果似乎显得格格不入。大多数常见的面部滤镜应用通常都会采用皮肤平滑技术——有时会达到滑稽的程度,让人看起来像性感的 Play-Doh 团块。然而,Deep Fusion 却反其道而行之,实际上似乎突出了面部的纹理。显然,苹果将面部作为其 AI 处理的一部分,但任何可察觉到的皮肤瑕疵只会随着增加的锐化而变得更加不完美。

这种效果也确实突出了头发的质感。有时这对拍摄对象有利,但就我而言,额外的强调使我的胡子看起来更像灰白头发老巫师的胡子。同样,这对我头顶的头发也不好看,这让我觉得在这篇非常公开的文章中发布一张近距离自拍照是一件很棒的事情。

当然,苹果正在使用人工智能来管理大部分过程,未来的软件更新可能会调整其性能,从而彻底改变整体外观。

与夜间模式不同,应用程序中没有指示器来显示你何时使用 Deep Fusion。无论如何,这都无关紧要,因为它是大多数照明情况下的默认相机模式。它不适用于超广角相机,当你处于光线过强的场景中时,它会回到智能 HDR 模式。当光线变得足够暗时,夜间模式就会接管。

总体而言,Deep Fusion 在相机整体性能方面有所改进。但是,如果人们以后要这样拍照,我可能应该开始保湿和护理我的胡须了。

<<:  独家报道 Facebook 利用人工智能加速 MRI 扫描的努力

>>:  DJI Mavic Mini 是一款伪装成玩具的严肃摄像无人机

推荐阅读

如何使用 Google Docs 模板来提高工作效率

Google 文档(或 Google 表格或 Google 幻灯片)中一个全新的空白页面可能会让人望...

真菌孢子和编织物结合在一起,制成耐用且可持续的建筑材料

令人着迷、复杂的真菌世界正在推动从蘑菇驱动的主板到康普茶衍生的生物塑料等所有领域的突破,但最新的成果...

彻底解析Ken-chan的魅力和情感!重新评价《大家的歌》的杰作

Ken-chan-大家的歌1985年8月在NHK教育电视台(现NHK E-Tele)播出的《Ken-...

土壤对地球生命的重要性

当我们想到生物多样性时,我们的脑海中通常会浮现出色彩缤纷的植物和树木、色彩鲜艳的两栖动物、爬行动物和...

加州的雪旱是危险的根源

红杉国家公园,是内华达山脉的一部分。Terabass加州可能又要面临一年的水资源危机。内华达山脉的积...

对名侦探柯南的绳文体验 OVA 进行全面评论!考察教育价值和娱乐价值

名侦探柯南:体验绳文时代吧! - 教育 OVA 的魅力与细节《名侦探柯南:去体验绳文时代吧!》是名侦...

没有哪些器官我依然可以生存?失去它们我能得到多少钱?

首先,我要声明:在美国,贩卖器官是违法的。而且非常危险。在顶级医院出售器官就已经很危险了,如果是在后...

《ISUCA》评论:一部拥有迷人角色和惊心动魄战斗的黑暗奇幻小说

ISUCA-全方位评审及推荐概述《ISUCA》是根据高桥治的原著漫画改编的电视动画。该剧于2015年...

母亲节最好的妈妈礼物

每年五月的第二个星期天,母亲节都会到来,就像每天太阳升起和落下一样可预测。然而,每年的同一时间,我们...

《东京地下世界》的魅力与评价:彻底解析地下世界的冒险

东京地下城 - 一场充满激情和友好的地下冒险2002年播出的电视动画《东京地下城》改编自悠乐昭信的人...

科学如何测量食物:奶酪的延展性、香蕉的辐射等等

口味是非常主观的事情。但当涉及到科学时,就必须测量,而且测量结果必须准确。以下是精确测量食物的 11...

Scrivener 3 深受畅销小说家的喜爱,可帮助各类作家

您是否曾盯着空白的屏幕,努力整理自己的想法?无论您是经验丰富的作家还是刚刚起步,开始写作并使其流畅往...

高速摄像机捕捉到黄瓜以每秒 65 英尺的速度喷射种子

眨眼之间,你可能会错过这种喷射黄瓜( Ecballium elaterium )喷射种子的速度。这一...

《泡泡糖危机:东京2040》的魅力与评价:未来都市冒险与人物深度

泡泡糖危机东京 2040 - 未来城市的战士1998 年至 2000 年播出的《泡泡糖危机:东京 2...

章鱼重写自己的 RNA 以在极寒天气中生存

章鱼无所不能,从它们标志性的伪装到向其他章鱼扔贝壳,但它们无法做到的一件事就是体温调节。由于这种进化...