【QA】我和 Googler 的悄悄話之 Google Pixel 8 / 8 Pro 的Ｎ個提問

艾爾文 — Fri, 06 Oct 2023 06:37:44 +0000

在 2023 Made by Google 發表之後，台灣也在 10 月 05 日舉辦了 Made by Google 硬體在台上市發表會。現場有 Google Pixel 的研發團隊、PM 等同仁，我抓緊機會問了一些心中的疑問。

大家都知道 Google Pixel 是手機界的大衛魔術師，有各種神奇的 AI 功能，雖然直到現在最新的 Tensor G3 處理器跑分仍然比不過 3 年前搭載在 iPhone 12 上的 A14 Bionic，但其實並不是每個人都需要那最強悍的遊戲和 GPU 性能（當然，除非你很在意你的銀行 App 可以跑到多高的幀率，或是「光追」是否讓你的 IG 更好看，那就另當別論），大多數的使用者，除了最基本的順暢使用及安全性、續航力外，更在意相機或是其他讓生活更方便的功能。

Google 在 2016 年新任執行長 Sundar Pichai 上任不久，就宣布 Google 的目標是成為一家以人工智慧為主的公司（A.I.-first company），自此 Pixel 就專注於 AI 整合軟硬體，以「數據」和「運算」為特色，成為只有 Google 才做得出來的手機。

回到剛發表的 Google Pixel 8 / 8 Pro 上來看確實是如此，除了常規例行性的硬體升級，最受矚目的還是那些「魔術」AI 功能，以下就幫大家整理了我們和 Googler 聊的悄悄話。

Pixel 8 / 8 Pro 亮點 AI 功能

Google Assistant 與 Bard 的結合 / 語音功能
- 更精確的語音辨識，甚至可以在一句話中語音輸入不同語言的文字
  - 我超期待
- 網頁朗讀功能，甚至可以整理、翻譯成其他語言唸給你聽
  - 之後才會提供此功能
通話相關
- 來電接聽助手，幫你用文字列示出銀行的制式語音選項
  - 美國行之有年，是我認為最有價值的功能之一，但台灣還沒開放此功能的跡象，Google 努力中。
- 講電話收音經過降噪處理，讓通話更清晰
- 來電過濾功能，用更自然的 AI 聲音自動回覆來電
  - 今年發表會上的示範超仿真，當然目前台灣也尚未開放，Google 努力中。
相機功能
- 完美合照：每次合照時，難免有人閉上眼或對自己的表情不滿意。完美合照將會把在指定秒數所拍攝的相近照片合併成一個更完美的團體照。
- 魔術修圖：透過生成式 AI 的幫助，不需要複雜繁瑣的操作，Pixel 8 系列只需要動動手指就能重新調整照片中物體的大小或位置。
- 魔術降噪：Pixel 8 系列可以透過機器學習來判斷音源種類，例如：風聲、群眾嘈雜聲或背景噪音等，透過 Google 首創的音訊計算修正功能，使用機器學習型模型將聲音分層，進而控制各層聲音的音量，降低影片背景中干擾噪音。
Pixel 8 Pro 獨佔需連網 AI 功能
- 影片強化器（即將推出）：即將推出的影片強化器將可以運用 Google 在運算攝影上的模型強化整體影片品質，改善低光源、動態穩定等影片品質。透過此項技術，Pixel 8 Pro 在日落時分或是昏暗的餐廳等低光源環境下，也能帶來清晰且令人滿意的影片。
Pixel 8 Pro 獨佔本機運行的 AI 功能
- 更強的 Magic Eraser 魔術橡皮擦（出廠就有）
- 語音備忘錄的自動總結（即將推出）
- Gboard 智能回覆等等功能（即將推出）
- Zoom Enhance 自動優化放大的照片（即將推出）

艾爾文：Pixel 的語音備忘錄即時轉錄逐字稿功能已多年，但遲遲未支援中文，什麼時候才會有？若有，會有 Speaker Labels 功能嗎？

Googler：Pixel 8 系列就會支援中文了。但辨識出不同人講話的功能（Speaker Labels）還要等待後續更新，目前此功能僅支援英文。

艾爾文：Pixel 的 Call Assist 功能真的很強大，什麼時候能在台灣使用？

Googler：目前還不行，還需要一些更多的語言模型訓練。我們努力中。

Googler：你覺得新功能完美合照（Best Take）如何？

艾爾文：我覺得這個功能很棒，值得肯定。但同時我也在思考，大家是否都有共識，修圖修多少是可以接受的？調色、修改天空的色調我可以接受；但改變照片中的表情，我猶豫了。從運算攝影開始，我們就一直在重新定義這個 Guideline，這個功能我還在適應中。它是從好幾張照片中挑選表情嗎？還是透過 AI 改變、生成表情（尚未測試前的提問）？

Googler：必須在一定時間內，拍攝好幾張照片，才能從中選擇表情，並非無中生有，也不能換臉。Google 在 AI 方面的使用是非常嚴謹的，每一個功能都必須經過我們的法律團隊審核。編輯過的照片，我們會在 Metadata 中增添一個 Tag。

艾爾文：我以為是系統會自動抓取拍攝單張照片前後幾秒鐘的時間記錄下來，或系統在背景多拍幾張，提供給使用者選擇？

Googler：我覺得這個方式不錯，很直覺，我們會回去討論。

艾爾文：以傳統觀念來說，照片的魔力在於「凝結瞬間成永恆」。那一刻無論是誰眨眼睛、誰扮鬼臉，都是當下「真實」的回憶，也是十年後回頭看能夠細細品味的回憶。如果每一張照片都是完美的一號表情，感覺失去了照片的意義。
但回到問題，我對於這個功能還是肯定的。也許對於我來說，是 Google 提供使用者這個選項，要不要使用在於使用者。也許保留原始的照片，Best Take 的照片則用在社群媒體上，畢竟大家都希望自己在群體照片中是好看的。

Googler：That’s right!

艾爾文：Pixel 8 / 8 Pro 魔術修圖（Magic Editor）是單純用手機上的 Tensor G3 運算嗎？還是要靠雲端算力？

Googler：魔術修圖是需要生成內容的，需要靠雲端運算，因此必須要在有網路的狀態下才能使用。

Googler：以一個影音創作者來說，你覺得魔術降噪（Audio Magic Eraser）這個功能如何？

艾爾文：簡直是福音！早期（其實也就是幾年前）的降噪麥克風，都是以「頻率降噪」的模式進行，很容易讓整段聲音失真。Google 是透過 AI 運算、分析，辨識出聲音裡各種不同的聲音，包括主要人聲、遠處人聲、嘈雜聲、風切、噪音等，進行 AI 處理，因此可以讓使用者選擇要保留或去處哪些聲音，我的理解正確嗎？

Googler：正確。你可以選擇我們提供的自動降噪模式，或是自己調整降噪程度。我們的預設，會保留一些現場的聲音，否則這段影片的聲音乾淨得太假，反而失去真實性。當然，我們一樣還是提供使用者這樣的選擇性，如果使用者就是要完全乾淨的聲音，技術上我們是做得到的。

艾爾文：Pixel 8 Pro 影片強化器（Video Boost）會經過什麼處理，一般來說需要多久？

Googler：因為需要上傳到雲端，所以受當下的網速和影片長度影響，通常大概 1 至 2 個小時，經過的處理其實很多也會因影片本身而異。

艾爾文：那可以處理到什麼規格的影片？拍攝 4K 60fps 的影片可以嗎？

Googler：目前只支援到 4K 30fps。

艾爾文：那不是 Pixel 8 Pro 拍攝的影片可以處理嗎？例如我使用 iPhone 拍的影片，傳到 Pixel 8 Pro 的手機送處理。

Googler：不行，這個功能除了雲端的運算，還有結合硬體的拍攝，所以必須是 Pixel 8 Pro 的手機拍攝的影片才能處理。

艾爾文：那要上傳到雲端，有些使用者多少會有點疑慮。Tensor G3 SoC 目前還沒辦法在本機做到對嗎？

Googler：喔，不行不行。這是非常複雜且大量的運算，目前市面上應該沒有 SoC 做得到。發表會上我們可能只說處理了 HDR 運算，暗光環境就會套用 Night Sight。但其實背後有還有非常多的處理，例如防手震、降噪等等。Google 提供 Pixel 8 Pro 的用戶這個服務，也會確保安全性，影片處理完畢就會刪除，不會留在雲端。

艾爾文：那處理之後的 HDR 是什麼規格的 HDR？例如是 HLG 還是 Dolby Vision 等？是 BT.2020 嗎？

Googler：是 HLG，BT.2020。

艾爾文：Pixel 8 / 8 Pro 的電影拍攝模式，可以做到拍攝完之後編輯焦點了嗎？

Googler：不行。現在 Pixel 8 和 Pixel 8 Pro 上的電影錄影稱為「模糊」，可以調整虛化程度、白平衡、曝光。

艾爾文：那可以使用不同鏡頭或倍率拍攝「模糊」影片嗎？

Googler：不行。

艾爾文：Pixel 8 Pro 的五倍長焦可以拍肖像模式嗎？

Googler：不行，會有這樣的需求嗎？

艾爾文：有！因為不同焦段的鏡頭拍出來的壓縮感不同，有時候在風景區、爬山的時候，5 倍光學變焦蠻好用的，如果可以啟動人像模式的話會很棒！

Googler：好，我們把這個 feedback 帶回去討論。

艾爾文：太好了！大大的感謝！

QA – 艾爾文 / Alvinist