让iPhone拍照能力大升级的计算摄影 相机为什么不用？

       在 iPhone 11 系列的发布会上，苹果高级副总裁菲利普・席勒（Philip W。 Schiller）在介绍 iPhone 11 Pro 系列的影像系统时，第一次将计算摄影的概念引入，这个概念也第一次被大众所熟知。

　　    其实，计算摄影这个概念并不新鲜，最早出现在 94 年就的一篇公开论文中，且认定机内合成 HDR、全景照片以及模拟散景都属于计算摄影范畴。但当时照片的主流载体还是胶片，数码相机才刚刚起步，手机上还没有摄像头。

       ▲ iPhone 11 Pro 发布会上介绍计算摄影的菲利普・席勒（Philip W。 Schiller）。 图片来自：Apple

　　    几十年后，影像记录的载体从胶片换成数字，手机拥有了摄像头，计算摄影也从理论中走出，渐渐成为一大潮流。

　　    不过这这潮流跟相机关系不大，相机厂商依然按部就班的提高像素、连拍速度和视频能力，似乎对计算摄影两耳不闻，拍出来的照片（直出）依旧很平庸，渐渐被智能手机‘超越’。

　　    与之相反的是， 智能手机芯片的算力越来越强，AI、算法、机器学习介入的范围也更广，图像的演绎方法越来越多，最终经过一系列‘算法’处理过的照片也愈发好看。

　　    现在，很多人出门更愿意用手机记录、分享，而相机越来越少见，这也反应在二者的市场表现上，智能手机市场增速强劲，相机市场则连年萎缩，甚至 DC（卡片相机）都渐渐消失。

　　    这时，就有人会问了，既然智能手机随手一拍所得照片的观感这么好，为何传统的相机厂商不去跟随计算摄影的潮流，考虑提高照片直出的观感呢？

　　    是相机算力不够，算不过来？

　　    这个问题我们先从‘核心’谈起。

　　    手机的核心是 SoC，它集成了 CPU、GPU、ISP、NPU 以及基带等，可以让你打电话、拍照、看视频、玩游戏、上网等操作，也直接决定了手机的性能。

　　    而相机的核心部件是图像传感器（CMOS），除了元件面积外，跟手机差不多，作成像与感光。另外，控制整套相机系统的中央处理芯片叫做图像处理器（Image Processor）。

　　    以索尼的 BIONZ X 图像处理器为例（α7 系列御用），它包括 SoC 和 ISP 芯片，并没有将 ISP 集成在 SoC 内，优点是索尼可以自行根据 CMOS 的性能需求，而自行增加 ISP 芯片的数量（α7RIII 的 BIONZ X 就配备了双 ISP），缺点就是集成化程度没有手机那么高。

　    　BIONZ X 中 SoC 的作用跟手机的类似，控制操控界面与相机功能，性能要求并不高。对图像传感器采集的‘数据’进行拜尔转型、解马赛克、降噪、锐化等操作，多是依靠 ISP，最终把 CMOS 采集的数据转换成相机的实时取景。在这个过程中，相机的 ISP 不涉及计算过程，只是把照片当做流水线上的产品，进行统一的处理。

        ▲ 索尼 BIONZ X 图像处理器。 图片来自：SONY

　　    随着现在相机的像素数、连拍速度以及视频性能不断提升，相机的图像处理器对图片处理的速度和吞吐量需求很高，单一的数据量很庞大，在不涉及‘计算’的前提下，相机图像处理器的处理能力远超过现在智能手机 ISP 的处理能力。

　　    但说到计算摄影，或者说 AI 能力，就有些不太一样了。智能手机的成像过程有些类似相机，不过在呈现最终画面之前，还需要 ISP、DSP 的计算，实时调整、优化，尤其是在多摄系统成为主流后，手机的计算数据量成倍增长。

　　    在 iPhone 11 Pro 系列推出多摄系统后，多摄系统能够平滑、无缝切换的背后是 A13 Bionic 中新增的两个机器学习加速器庞大的数据处理能力，达到了每秒一万亿次，如此高频高效的数据处理能力才算是吃下了三个摄像头所产生的庞大数据量。

　　    相机的图像处理器多是对原始数据进行预处理，几乎没有计算的过程，而手机 SoC 则包括数据采集预处理以及后续的计算过程，二者着重的方向不同。

　　    面向群体不同，市场细分的结果

　　    手机计算摄影发展很快，根源还是因手机的图像传感器（CMOS）尺寸太小，以现在的技术，想要在物理上超过或者接近相机只能通过算法优化，拼直出观感，比如说，自动 HDR、超级夜景、模拟大光圈、魔法换天等功能。

　　    但这些算法的演绎，做到可以‘个性化’干预还是很难，比如说滤镜加到什么程度，HDR 高光暗部保留到什么程度等。不过，对于面向大众人群的手机而言，尽可能让大多数人拍出不错的照片，更加符合手机的市场定位和人群定位。

　　    自相机发明以来，相机就有着绝对的‘工具’属性，为了高效，外观、操控、功能等等均会向效率妥协。面向更小众的职业人群，自然也会更符合他们的需求，相机们会尽可能的记录色深、色彩、光线等信息，以便使用者进行更大范围的后期调整，直出好不好看，并不在他们的需求里。

　　    不过，事情并非那么绝对，相机们也在尝试改变。富士就一直致力于相机的直出效果，引入了‘胶片模拟’，透过不同的算法，让拍出的照片更有味道，观感也更为好看。但这过程并没有经过场景计算，而是需使用者自行选择，这与手机的一些胶片模拟 App 有些类似，涉及不到所谓的‘计算摄影’。

　　    AI 后期，才是相机的大方向？

　　    摄影领域中，后期处理是必不可少的步骤，一方面，后期软件可以充分利用 RAW 格式中所记录的丰富信息，另一方面也可借助 PC 的高性能和算力来对照片快速处理。

　　    与相机厂商不同，几乎主流的专业后期软件都已开始在 AI 上发力，强调 AI 的处理能力。

本站部分内容、观点、图片、文字、视频来自网络，仅供大家学习和交流，真实性、完整性、及时性本站不作任何保证或承诺。如果本站有涉及侵犯您的版权、著作权、肖像权的内容，请联系我们(0536-8337192),我们会立即审核并处理。

我要评论

当前已有loading...个参与

验证码：

• 
  居家全职修图师，全天
• 
  客片
• 
  婚纱照
• 
  婚纱

• 结婚拦门要红包话术 拦门顺口溜 一起来看看
• 收到邀请函该怎么回复呢 结婚请帖回复用语
• 结婚铺床的步骤及顺口溜都有哪些呢？一起来
• 男方第一次上门意味着什么呢？一起来看看吧
• 结婚登记的完整流程是怎样的呢？一起来看看
• 结婚证件照要求及穿着是怎样的呢 一起来看
• 婚礼所需物品清单，一起来看看吧！
• 本命年有什么讲究 要注意什么呢？一起来看