太平洋科技要聞

2023-2024年影像旗艦，為什么都選它？

愛范兒整合編輯：黃安莉發(fā)布于：2023-12-24 20:30

第三代驍龍 8 移動平臺提檔 10 月發(fā)布，帶來了一個巨大的連鎖反應：Android 旗艦手機紛紛在今年第四季度扎堆發(fā)布，在價格和產(chǎn)品力上雙雙發(fā)力，競爭態(tài)勢極為激烈，甚至有的手機發(fā)布出來，你會產(chǎn)生疑問：這機器能賺錢嗎？

真我 GT5 Pro 鏡頭模組比如前段時間發(fā)布的超高性價比旗艦手機真我 GT5 Pro在其 3000 出頭的價位段上，提供了極具誠意的配置：

第三代驍龍 8 移動平臺（驍龍 8 Gen3）

12+256GB 的起售配置

至高 4500nits 亮度，與京東方聯(lián)合研發(fā)的無雙屏

100W 有線+50W 無線充電

驍龍 8 Gen3+IMX890+虹軟算法組成的天花板級別長焦

等等，為什么驍龍 8 Gen3 要出現(xiàn)兩次？

SoC 不只有 CPU 和 GPU，還有 ISP 等等

十幾二十年前，我們聊芯片，基本默認是 CPU，但芯片約等于 CPU 的想法早已過時，因為大芯片發(fā)展成了平臺一樣的 SoC（System on Chip），小芯片更是種類繁多，有負責電源管理的，有負責屏幕顯示的等等。

當我們聊起 SoC 的時候，目光往往會集中在 CPU 和 GPU 上，畢竟在跑分游戲當中，它們貢獻最大。

不過人生不止吃飯睡覺，手機也不止跑分游戲，當我們舉起手機，打開相機取景，按下快門，接著獲得一張照片，再上傳到社交網(wǎng)絡，在這個短短過程當中，SoC 幾乎是「多部門協(xié)作」，動用非常多的模塊。

SoC 里面，還有其他很多不參與跑分軟件跑分，但至關重要的部分。

以前不久發(fā)布的驍龍 8 Gen3 為例，它的組成相當復雜，除了負責通用計算的 CPU 和圖形計算的 GPU 之外，還有主要負責 AI 計算的 NPU 和 AI 引擎，負責 5G 連接的調(diào)制解調(diào)器、負責 Wi-Fi 的 FastConnect 移動連接系統(tǒng)，負責音頻的驍龍暢聽，負責安全的軟硬件組合，以及負責圖像信號處理的 ISP 等等。

ISP （Image Signal Processor，圖像信號處理器）就是為什么驍龍 8 Gen3 能夠在真我 GT5 Pro 配置表里反復出現(xiàn)的原因之一。

ISP 運作示意圖，圖片來自 CSDN

空有好鏡頭和好影像傳感器還不夠，還需要 ISP 把鏡頭看到的，傳感器接受到的，轉(zhuǎn)換成屏幕能夠顯示的，人眼看到的。

這個過程相當復雜，首先是光線通過鏡頭，入射到影像傳感器的感光區(qū)域，傳感器經(jīng)過光電轉(zhuǎn)換，獲得了 Bayer 格式的原始圖像，也就是后綴為.raw 的圖像，Bayer 格式的原始圖像再經(jīng)過 ISP 處理，輸出空間域圖像數(shù)據(jù)到后續(xù)的視頻接口單元，再供給到屏幕上顯示。ISP 的作用在于優(yōu)化、增強和處理從手機攝像頭捕獲的圖像和視頻信號，以及管理圖像數(shù)據(jù)的傳感器接口和后續(xù)處理。

流程上像是連接影像系統(tǒng)到顯示系統(tǒng)的轉(zhuǎn)換器，但是 ISP 干的活非常多，包括但不限于圖像質(zhì)量改善，比如色彩增強，白平衡調(diào)節(jié)；還有降噪處理，這點在夜景拍攝中至關重要，沒有強大 ISP 去減少噪點和顆粒，現(xiàn)在旗艦手機的夜景會非常糊；另外，包括 HDR 拍攝背后的多幀合成，慢動作拍攝，全景模式的拼接等等等。

另外，手機攝影的低門檻，也有賴于 ISP 的功勞，很多人拿到一部徠卡中畫幅相機很可能都拍不出一張清晰的照片，因為對焦，光圈等都需要手動去調(diào)節(jié)。在手機上，ISP 通過實時計算，和激光對焦，光線傳感器等部件一起，實現(xiàn)自動對焦，自動曝光，自動光圈，自動白平衡等功能，幫助用戶能在打開手機相機的瞬間，就能拍下清晰的照片。

當我們詬病有的手機相機對焦慢，白平衡差，自動 HDR 還是會過曝，夜景畫質(zhì)不純凈的時候，很可能問題就出在那顆性能羸弱的 ISP 上。

而驍龍 8 系芯片和影像旗艦手機總是相伴出現(xiàn)的主要功臣，當然也是藏身其中的 ISP。

所以開頭舉例真我 GT5 Pro 的例子用意就在這里，因為索尼 IMX890 影像傳感器+驍龍 8 Gen3+虹軟算法的組合具有典型性意義，強大影像硬件配強大的 ISP 能力，和優(yōu)秀算法搭配，就是能拍出好影像的基礎。

驍龍 8 Gen3 這一代的 ISP 的基礎性能就更加強大了，實際上驍龍 8 Gen3 的 ISP 有 3 個，支持 3 個攝像頭同時拍攝 HDR 視頻，色彩位深達到了 18-bit，最大支持 2 億像素攝像頭，以及 8K 30fps 或者 4K 120fps 視頻錄制，慢動作視頻錄制支持 720p 960fps.....

這意味著驍龍 8 Gen3 的 ISP 有著非常卓越的數(shù)據(jù)處理能力。

但這還不是驍龍 8 Gen3 影像能力的全部。

AI 是科技的魔法，Snapdragon Sight 是讓照片變好的咒語

如果是在 5 年前，有廠商說自己的照片是單反級別，影棚級別，那一定會被專業(yè)人士和大眾玩家一起聲討夸大宣傳。

但是在 2023 年，已經(jīng)有不少廠商開始宣傳單反級人像，影棚級人像了，在一些細分場景中，影像旗艦手機的表現(xiàn)，似乎已經(jīng)摸到了專業(yè)影像設備的門檻了。

這就是計算攝影的力量所在，讓移動影像從彎道處看到專業(yè)影像的尾燈，光圈不夠大？計算攝影能模擬出自然的虛化效果。焦段不夠長？潛望變焦再數(shù)碼變焦再計算攝影優(yōu)化細節(jié)，也能得到不錯的超長焦相片。

但在 2023 年這個 AI 魔法之年，影像和 AI 的耦合自然也是水到渠成。

Snapdragon Sight 驍龍影像技術的進展隨著驍龍 8 Gen3 的發(fā)布，也和 AI 發(fā)生了更強關聯(lián)。驍龍 8 Gen3 出眾的 ISP 性能，以及進一步加強的 AI 算力，讓 Snapdragon Sight 驍龍影像技術變得更強，成為諸多影像旗艦的技術底座。

比如 Snapdragon Sight 支持的 DCG（Dual Conversion Gain，雙轉(zhuǎn)換增益）技術是一種能提供更佳畫質(zhì)，更快成像的技術，可以用在 HDR 成像上。本質(zhì)上這也是一種多幀合成技術，但 DCG 的多幀畫面是同時產(chǎn)生，而非傳統(tǒng)多幀合成的前后生成。

還有諸如夜視模式，杜比格式支持，本質(zhì)上還是 ISP 性能提升的結(jié)果。

但圖像擴展，對象擦除等技術，則還需要 NPU 等 AI 運算模塊的支持。

此前我們會認為這些 AI 魔法般的技術不屬于影像范疇，但某種程度上來說，這些曾在 PhoneShop 等軟件上需要復雜操作的技術，如今變得簡單易得。

并且對象擦除這種功能僅限于圖片，而現(xiàn)在驍龍 8 Gen3 開始支持在視頻當中進行對象擦除，背后依舊是「算力」的關鍵詞在起作用。

同時，ISP 在 AI 的加持下，便可以進化成認知 ISP，能憑借高通 AI 引擎在拍攝照片和視頻時進行實時語義分割，識別出圖像的各種元素，比如建筑，船，河流，樹木，人的臉眼發(fā)皮膚等等。驍龍 8 Gen2 的時候，認知 ISP 能夠識別出圖片中的 8 層語義，當時便甚至已經(jīng)可以支持去除眼鏡反光這樣的能力，到了現(xiàn)在的驍龍 8 Gen3，已經(jīng)將可實時識別的語義層數(shù)量提升至 12 層。

識別的層數(shù)越多，意味著對于圖像的理解更清晰，后期增強的可能性就越大。

對于消費者來說，影像技術在 2023 年，在驍龍 8 Gen3 的加持下，正處在一個加速的檔口：拍出一張好照片一段好視頻正變得比以往更容易，同時這張照片這段視頻，在 AI 的魔法下，在 Snapdragon Sight 驍龍影像技術的加持下，擁有了更多的可能性，可以擴展，可以擦除，可以再編輯。

當我們打開諸多影像旗艦手機的頁面，劃到影像介紹部分的時候，就會不斷地感受到「算法」無處不在，和 ISP 以及 NPU 等等支撐起各種「引擎」。

實際上，如果對比 Snapdragon Sight 驍龍影像技術在技術上的準備，就會發(fā)現(xiàn)，其實它給現(xiàn)階段的手機攝影留下了非常多的冗余。比如 4K 120fps 視頻拍攝，3 攝像頭同時拍攝等等功能還沒有完全落地，原因嘛，當然上游廠商的進度必須要領先終端廠商，要提供更多的潛力供挖掘，而不能成為掣肘。

再展望 2024 年的影像旗艦，OPPO Find X7 系列，vivo X100 Pro+，小米 14 Ultra，三星 Galaxy S24 Ultra 等等，更強大更專業(yè)的影像旗艦，將進一步發(fā)揮出驍龍 8 Gen3 和 Snapdragon Sight 驍龍影像技術的實力。

屆時，我們會更明白這顆芯的價值。

本文來源：愛范兒

影像旗艦第三代驍龍 8

愛范兒

原創(chuàng)欄目