▌幕後功臣AUBE

▌看試拍，低光錄影

XZ2P超高感光：1/16s ISO3200 f/1.8 G7+ThinQ超亮照片: 1/10s ISO2300 f/1.6 P20 Pro自動：1/17s ISO6400 f/1

XZ2P超高感光：1/8s ISO8000 f/1.8 G7+ThinQ超亮照片：1/5s ISO2250 f/1.6 P20 Pro夜景模式：5s ISO3200 f/1.8

啟用雙鏡頭，超高感光: 1/8s ISO8000 f/1.8 關閉雙鏡：1/8s ISO8000 f/1.8





XZ2P手動+超高感光：1/20s ISO12800 f/1.8 XZ2P手動+超高感光：1/80s ISO51200 f/1.8 G7+ThinQ手動：1/10s ISO3200 f/1.6 P20 Pro手動：1/15s ISO12800 f/1.8

XZ2P超高感光FHD/60fps（人物） G7+ThinQ明亮錄影FHD/ 30fps（人物） P20 Pro夜間錄影-4K/ 30fps（人物）

XZ2P超高感光錄影-FHD/ 30fps（橋與倒影） G7+ThinQ明亮錄影-FHD/30fps（橋與倒影） P20 Pro夜間錄影--4K/30fps（橋與倒影）

XZ2P超高感度錄影-FHD/ 30fps（煙火） G7+ ThinQ自動錄影-4K/30fps（煙火） P20 Pro夜間錄影-FHD/ 60fps（煙火）

XZ2P自動逆光：1/50s ISO50 f/1.8 G7+ThinQ自動HDR：1/172s ISO50 f/1.6 P20Pro自動：1/120s ISO50 f/1.8

XZ2P智慧場景：1/50s ISO125 f/1.8 G7+ThinQAI相機: 1/33s ISO200 f/1.6 P20 Pro自動：1/60s ISO160 f/1.8 P20Pro夜景模式：6s ISO100 f/1.8

XZ2P智慧場景：1/16s ISO800 f/1.8 G7+ThinQ AI相機：1/4s ISO900 f/1.6 P20 Pro夜景模式：4s ISO800 f/1.8

XZ2P智慧場景：1/50s ISO50 f/1.8 G7+ThinQ HDR：1/100s ISO50 f/1.6 P20 Pro自動：1/120s ISO50 f/1.8

XZ2P美食模式：1/50s ISO200 f/1.8 G7+ThinQ AI美食：1/25s ISO200 f/1.6 P20 Pro自動美食：1/30s ISO250 f/1.8

木橋組 救生圈組 宴會廳組 美食組

在前日SONY Mobile的官方活動中，也請到總部的相機工程師來解說XZ2 Premium相機的性能及設計故事，並隨後安排了夜拍場景即刻測試，驗證一下XZ2 Premium的夜拍功力，我們就來看看這一輪的測試吧。之前的報導也提過多次，XZ2 Premium的相機重點在高感光拍照、錄影，以及4K HDR影片。工程師提到，XZ2 Premium之所以能拍攝可用的超高感光照片、影片，就是因為雙鏡頭及內建的AUBE即時影像處理晶片。在彩色相機之外，多了黑白感光元件，這感光元件單位畫素有1.55微米，光圈則是f1.6，透過這顆就可以捕捉到高感度/ 亮度較好的細節，再把彩色和黑白一起拍到的畫面，交給AUBE這個影像處理晶片，融合出高感光低光照，照片ISO高到51200，錄影則到12800都還是可用素材，這些本來都是單眼才能做到，現在也在手機上實現了，這有在Follow XZ2 Premium的觀眾朋友應該已經知道了。（首圖是官方情境圖，並非現場拍攝的)這也是結合SONY集團各部門技術而來，比方鏡頭組是來自相機部門的G鏡技術，感光元件及AUBE則來自SONY半導體研發。XZ2 Premium在自動或手動模式下，都可以切換要雙鏡頭「自動」或是「關閉」，預設是自動，一般就留在預設就好了，不需要去關閉。但自動的話，就表示有時開，有時關，所以什麼時候兩顆鏡頭都會拍？會有只用彩色單鏡拍的時候嗎？這時候不就跟XZ2一樣？黑白鏡頭對白天或非低光的畫質有幫助嗎？抱歉這些在當場忘了問，補問中....（那我現場到底在幹嘛..Orz）我目前只確定，當環境低光到畫面上出現「超高感光度」時，就一定是開雙鏡在拍。但對XZ2 Premium來說，什麼時會才會啟動超高感光？如果依EV植來看，大約在5左右會自動啟動，實際大約是昏暗的房間、路燈夜景那樣的光線。根據SONY的資料，XZ2 Premium比XZ2感光度高出4倍，在如ISO 12800這樣的高感光下，照片清晰度也明顯提升。在工程師提供的範例裡，還有ISO到51200，仍然可以看出星空的照片。如果有啟動超高感光度了，拍照時你可以手動把ISO調到12800以上，最高51200。錄影不能手動拉ISO，但最高可以用ISO12800的感光度來錄影，可以提高極低光錄影的亮度。AUBE是XZ2 Premium新增的獨立影像處理晶片，雙鏡頭拍出的高感光照片、影片，都會送到這裡處理。但是兩顆鏡頭同時拍，因為兩顆相機位置不同，會面臨到幾個問題，一是光軸錯位（Optical axis），二是視差的問題。光軸偏移簡單來說就是變形的問題。手持拍照時，我們常會拿成各種歪斜，XYZ軸各種方向的歪（圖上Physical那排），最後成像都是以彩色取到的角度為準，那這時在它旁邊的黑白鏡頭，就會因為手機拿歪了，讓取到的畫面也有各種歪斜（圖上image Sensor那排），這樣跟彩色拍到的畫素就對不到位。視差大家應該比較熟悉，就跟人的眼睛一樣，鏡頭一顆在左一顆在右，捕捉到的畫面位置其實是不同的，比方你現在可以把手機放在兩眼正中間，然後分別只用左眼跟右眼看，會發現東西的位置一個偏右一個偏左。一般來說，東西越近，視差也就越大，所以兩顆鏡頭捕捉到的畫面裡，若物件有遠有近，那視差的差距就更複雜了。那麼AUBE做了哪些事呢?當AUBE接收到彩色+黑白傳來的影像資訊，會先對彩色畫面做些前置處理，之後就把彩色+黑白影像做三道融合步驟。第一道就是前面講的，根據影像裡的座標資訊，修正光軸偏移的問題，將黑白轉到跟彩色畫面一樣方向。第二道就是要去偵測遠近物體不同的視差，找到黑白畫素，要對應到彩色那張的哪個位置，第三道就可以融合了。這裡的融合是以畫素為單位在做的，因為黑白拍到的是高感度畫素，融合出的影像就會有較好的亮度。不過瑞凡，這裡的重點應該是：錄影時是每秒連丟30張或60張有偏移又有視差的影像給AUBE處理啊～AUBE不僅要把畫素融合，還要降噪美化，還要即時完成。如果以能者多勞的概念來想，可見AUBE這影像處理晶片能力頗強。咦? 每秒丟60張?嗯，昨兒個試拍時發現超高感度模式下，最大可以拍1080p/ 60fps的影片。另一個問題是，非低光的照片影片，或是不管是單鏡頭拍還是雙鏡頭拍，是不是都會用AUBE處理？單鏡頭拍理論上不會走到後面那三道步驟，但會因為有AUBE，而處理得比沒AUBE的XZ2漂亮嗎？這些我也得去問一下...(所以我媒體體驗會時到底在幹嘛...Orz)XZ2 Premium上的低光解決方案就是：拉高ISO，AUBE處理。跟其他廠商的長曝、用大感光元件、多幀合成、四合一畫素、切換大光圈...等方法都不同，拉高ISO拍照跟錄影都可以作用，超低光增亮效果好，也可以讓快門時間短一點避免手震，但手機感光元件畢竟小，在抹掉噪點跟保留清晰度之間的拿捏就看廠商取向。另外一點是，Xperia手機的智慧場景其實一直有做多張合成，這個XZ2 Premium仍然有保留。但有個問題是，雖說拉高了ISO，但有些低光下快門還是1/4秒、1/8秒的，這樣的速度還是容易手震，這也是SONY手機未來還可以想辦法解決的地方。所以來看看成品吧。今天加入PK的是P20 Pro及G7+ ThinQ。拿P20 Pro來大家知道是因為它的長曝夜景模式，加入G7+ ThinQ則是因為它個「超亮相機」，也可以在低光時加強拍照跟錄影亮度，各家有各家增強低光畫質的方法，就一併來比較看看囉。第一組，最一般的夜景，這算偏暗的環境了。XZ2P自動啟動高感光了，G7+也開超亮照片模式，P20 Pro呢，我選用自動模式下的照片，為什麼呢? 因為拍攝當時是在行駛中的船上，P20 Pro的長曝夜景有點因為移動中而模糊，所以沒用，但P20 Pro自動模式的亮度好像也不差啊。＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝第二組就是周圍沒燈的低光了。XZ2P有高感光，G7+ ThinQ也是超亮模式，P20 Pro則使用長曝夜間來拍。我覺得都不太好，但以當時環境來說不苛求了，可以注意的反而是XZ2P的ISO8000，清晰度與隔壁ISO2000多的相當，是可以表示讚許的地方。至於降噪抹圖風格，看你的口味吧，縮圖用的話XZ2P的看起來比較銳利清楚，但若要放到100%檢視，那個銳利感就會變成顆粒感。這裡對照一組XZ2P本身，一組智慧場景，有啟動雙鏡及高感光，另一組只用彩色鏡頭拍的差別。有雙鏡頭，看來利用融合黑白鏡頭的畫面，可以讓ISO不用拉到那麼高。＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝第三組繼續在這烏漆媽黑的地方測，看手動模式拉高ISO拍出來會怎樣呢?XZ2P拉到12800，開雙鏡。P20 Pro也拉到12800，G7+ ISO手動最高只能到3200。G7+這組亮度不夠不予討論，XZ2P跟P20 Pro在這樣高的ISO下照片都還可用，都不錯。為何只拉到12800而不是51200呢? 因為在這亮度下，XZ2P拉到51200拍的照片，顆粒感已太大，不覺得是張可用的照片，因此就不拿51200的照片出來比了。（但我要補充，不是說51200不可用，是在這周圍都沒燈的地方顆粒會太大。）=======================================================第四組我們來看低光錄影，這也是XZ2P和其他品牌相較最能勝出的地方，但差別多大呢?4-1）媽豆乾杯Look～這組媽豆臉上是有光的，所以不算很暗，但XZ2P還是自動開啟高感光了，G7+也開了超亮錄影，P20 Pro因為沒有低光錄影模式，就開了它錄影最高的4K來拍拍看...4-2) 遊輪行進中錄一段低光風景，一樣XZ2P跟G7+都有開各自的低光模式，XZ2P有開進階防手震，P20 Pro則開4K來拍。4-3）以低光模式拍煙火影片，可煙火有點遠XD，但這段XZ2P有開高感光，G7+則用自動模式，P20 Pro用FHD/ 60fps來拍，不過事後我覺得選錯了，應該選1080p讓它可搭配防手震比較好...Orz當中環境最暗的是橋與倒影那裡，可能這幾段測試環境，都還不算很暗很暗，就沒有突顯到XZ2P的功力重點。XZ2P的低光錄影覺得畫質、亮度、清晰度在稍亮或較暗的場景，表現都蠻平均的，天空雲層拍得到，河面上的反光也有把眼睛看到的呈現出來。但你說清晰度或乾淨度，可能還是受限於低光高ISO的關係，就還是手機的水準。但煙火那段拍到繽紛的河面倒影，很漂亮。但P20 Pro在這三段的場景，除了煙火那裡亮度較暗外，其他也都捕捉得還不錯，可能是本身感光元件就大的關係，只要有光線，在這些場景裡也還不錯。P20 Pro的錄影結果，這就跟上次在記者會會暗室裡測到的不一樣...＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝第五組我們來拍明暗反差大，需要HDR修正的場景拍照。這是一個有發光扶手以及深色地毯樓梯。XZ2P這時候是雙鏡頭拍，智慧場景偵測到逆光，G7+有自動開啟HDR，P20 Pro則使用自動模式。我不太清楚為什麼G7+ThinQ的快門會自動偵測到那麼快，在這張的HDR修正效果看來沒有很優。XZ2 Premium就是中規中矩，畫面乾淨，而且地面雖是深色，但地毯的細節有出來。P20 Pro快門很短但亮度很好，HDR效果也明顯，不得不說P20 Pro的運算有時真會給人出乎意料的驚喜。＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝第六就簡單看一些室內場景，這裡XZ2P都維持智慧場景＋雙鏡自動的設定。▼這組顏色差比較多，現場的燈是黃的，眼睛看是介於XZ2P跟P20 Pro之間，XZ2P偏白，P20 Pro又太黃，但XZ2P比較有修正白平衡，其實比較自然。▼這組三支都有偵測到美食。我有個好奇的是，XZ2P不知道有沒有因為多了黑白鏡頭，而讓一般的拍照細節、亮度變好。這個我在補問中，不過這裡先來跟同樣是黑白+彩色一起拍的P20Pro看看100%局部比較：雖然我覺得XZ2P應該要因為有黑白鏡頭而有不同，但似乎不是每一張的細節都比較清楚...我補問一下雙鏡頭何時啟用何時不啟用，再來看怎麼拍吧..在今天的測試機裡還沒看到的，是散景跟黑白模式，這會在8月隨著軟體更新上線。根據SONY自己的統計，使用者有50%的照片都是在低光的環境下拍的，以及有5%是在超低光環境下拍攝，超低光拍攝比例這麼少的，是因為太難拍了，大部分人拍不起來索性不拍。因此低光拍照、錄影品質一直是消費者希望改進的地方，這也是SONY決定以雙鏡頭來提升低光拍照品質的原因。看完這裡的比較大家應該也生出自己的想法了。就像前面有組例子一樣，XZ2 Premium ISO8000下的清晰度，跟另外兩支手機ISO2000、3000拍出的差不多，加上拉高低光錄影，這是XZ2 Premium技術上的亮點。but...技術厲害，跟拍出的照片合不合你的口味，看起來討不討喜，有時候是兩回事。我回想第一次看到P20 Pro夜景照，以及看到XZ2P全黑下也能錄影的心情，前者的效果是超乎我意料的，有驚艷的感覺。而後者則是覺得技術的確很厲害，但可能因為畫面上還是顆粒跟點點，所以心情比較平靜。我想關鍵是最後的成果是否討喜的關係....XZ2 Premium有很厲害的技術，在低光、沒光、在KTV、在生日會上的錄影，是勝過P20 Pro，也勝過其他手機的。P20 Pro的夜景色彩美、人像也較美、散景氣氛也美美的，第一眼看會覺得漂亮。但大眾口味會偏向哪個，我來說可能會淪為主觀，不如大家自己評論。