當前位置:編程學習大全網 - 編程語言 - 好照片是如何煉成的 幫妳讀懂手機ISP

好照片是如何煉成的 幫妳讀懂手機ISP

IT168 評測智能機時代,每壹名消費者都希望隨手拍出好照片,拍照已成為衡量壹部手機品質的重要指標,三星S7、iPhone 7、華為P9這些在拍照上表現卓越的手機備受追捧。究竟是什麽決定了手機的拍照效果?其實智能手機拍照和專業相機拍照壹樣:鏡頭、傳感器、ISP、算法***同決定了手機成像的質量。其中前兩者是商家極力渲染的部分,消費者對其也有了壹定了解,認可索尼的傳感器、藍寶石鏡片、6片式模組等,但是談及ISP和算法卻還比較陌生。

實際上,ISP和算法更是決定能否拍出好照片的重要因素。舉幾個簡單的例子,歷代iPhone的相機模組在參數上並不突出,但是其表現往往可以秒殺市面上的大多數產品,蘋果對於其自主ISP的打造、算法的持續深耕功不可沒。老羅還專門去拜訪富士通的五十嵐千秋先生,就是為了與富士通在ISP和算法層面進行合作,提升T1的成像效果。

近幾年,在相機硬件供應僅限於索尼、三星、OV等傳統大廠的情況下,各款手機的硬件差異並不明顯,為了尋求拍照的突破,眾多廠商也在ISP與算法方面加大投入,越來越多的黑科技被融入其中。下面我們就來談談ISP以及基於ISP的壹些新鮮算法,了解壹張好照片是如何呈現出來的。

究竟什麽是ISP?

ISP是Image Signal Processing的縮寫,即圖像信號處理器,其主要功能是把前端圖像傳感器傳輸的信號做後期處理,比如對焦、降噪、HDR修正等。隨著手機攝像頭像素的提高,高速連拍,全高清甚至4K錄制的加入,手機對ISP的處理性能要求越來越高,ISP性能也隨之提升,不僅可以有效提升相機動作的響應速度,人臉識別與自動場景的識別等復雜功能也可以通過ISP芯片來實現。

▲A10 Fusion融合了自家最前沿的ISP

發展到今天,ISP不限於擁有出色的處理能力,還具有豐富的可編程性,廠商可以根據自身的硬件情況定制算法,實現優化成像效果,豐富相機功能的作用,比如我們熟悉的先拍照後對焦、大光圈背景虛化等。得益於半導體技術的飛速發展,手機處理器通常都集成了壹顆ISP,比如高通驍龍820集成了Spectra ISP、聯發科的Helio X20內置Imagiq ISP、還有蘋果A10 Fusion也融合了自家最前沿的ISP。

ISP推動雙攝發展

進入到2016年,iPhone 7、華為P9、榮耀8和小米5s Plus的雙攝機型相繼發布,雙攝逐漸成為手機拍照的前沿科技。其實這些背後,很大程度上是配套的ISP以及算法層面的推動。

以高通的Spectra ISP為例,擁有雙圖像信號處理單元,原生就對於雙攝有著很好的支持。借助於這顆ISP,高通也是推出了Clear Sight技術,即使用黑白+彩色的雙攝像頭同時捕捉畫面,彩色鏡頭捕捉色彩,黑白鏡頭的進光量是普通鏡頭的3倍,捕捉更多細節,兩者獲取的信息各有所長,Spectra ISP配合相應的算法進行實時處理,使得呈現的照片具備更高的動態範圍、更銳利的畫質和更少的弱光噪點。小米5s Plus正是運用的此套解決方案,類似的方案的機型還包括華為P9、榮耀8、cool 1等,盡管采用不同廠商的的ISP、算法,但原理基本壹致。

除了高通,聯發科的Imagiq ISP也對於雙攝像頭技術有所支持,及時處理雙攝像頭捕捉的景深信息,並利用這些信息可以實現實時背景虛化、先拍照後對焦的有趣功能。蘋果自不必多說,A10 Fusion內置的ISP可以很好的協調雙攝取景,做到光學變焦與數碼變焦的自然過渡,近期延伸出的人像模式也是這顆ISP的功勞。

人工智能逐漸加持

我們對於人工智能的印象,多數還停留在Siri和小冰的階段,即會對問題和命令作出相應的答復,但實際上,這只是人工智能應用的冰山壹角,人工智能已經延伸至ISP領域。這點蘋果應當是布局已久,陸續收購了四家機器學習公司,而機器學習正是人工智能的核心所在。所謂的機器學習,從實踐的角度來講,機器學習是壹種通過利用數據,訓練出模型,然後使用模型解決問題的壹種方法,簡而言之就是賦予計算機學習解決問題的能力,而非簡單的邏輯判斷,程序式結果輸出。

以蘋果最新的A10 Fusion內置的ISP為例,這顆芯片即融合了機器學習技術,可以在日常使用中通過用戶的使用數據進行針對性優化,比如提升對焦速度、調節復雜場景下的曝光等。更為關鍵的是,依靠iPhone 7 Plus的雙攝像頭,這顆圖像信號處理器可以區分人物和背景,並進行背景虛化,拍攝出可以單反大光圈效果的照片。盡管目前效果並不自然,但是通過不斷地嘗試學習,這顆ISP的識別算法也會自動改進,人像邊緣識別越來越準確,虛化效果更加自然。

▲iPhone 7 Plus背景虛化

應該說,蘋果在人工智能方面消息不斷,不斷付諸於行動。巧合的是,谷歌在昨天淩晨的發布會中也在不斷渲染自己在人工智能上的技術儲備,兩大巨頭相繼發力,可以預見,人工智能扮演的角色將越來越重要,相信更加智能的ISP已經在路上。

  • 上一篇:請問最常用的編程軟件是哪些
  • 下一篇:中國語言文學論文開題報告論文集
  • copyright 2024編程學習大全網