首頁/ 遊戲/ 正文

一鍵能讓照片變成三維得,這是什麼黑科技

計算攝影這東西現在大家都不陌生了,這玩意兒最近確實流行得很,從蘋果到國內的藍綠大廠都在搞這方面的技術。

因為有一點必須要承認,優秀的計算攝影可以彌補手機硬體的不足,讓照片質量變得更高。

許多手機的虛化都是算出來的 ▼

一鍵能讓照片變成三維得,這是什麼黑科技

不過要說計算攝影界最會玩的,託尼覺得其實是谷歌。

因為谷歌依靠著強大的計算攝影,能讓自家只有一顆攝像頭的 Pixel 手機也能拍出質量相當高的照片,大大超出了人們對它的預期。。。

一鍵能讓照片變成三維得,這是什麼黑科技

而前段時間的一份研究報告,又讓照片的質量提升到了一個離譜的高度。。。

一鍵能讓照片變成三維得,這是什麼黑科技

具體有多離譜呢?這個叫做

RawNeRF

的技術不僅可以讓昏暗的夜景照片變得明亮無比,

而且可以做到近乎完美的降噪。。。

油管上的一個影片展示了幾個場景,比如這張照片裡的光源只有蠟燭,幾乎看不清其他地方。

一鍵能讓照片變成三維得,這是什麼黑科技

如果我們在照片的 RAW 原資料基礎上提升亮度的話,照片細節確實變多了,也變得更亮了,

但是密密麻麻的噪點也出現了。。。

一鍵能讓照片變成三維得,這是什麼黑科技

有一說一,還不如不提升呢。。。

這也就意味著,在通常情況下,我們要在細節更少或者噪點更多之間做出取捨。

現在確實有一些去噪技術可以緩解噪點問題,但去掉噪點之後的照片。。。也沒眼看了。

一鍵能讓照片變成三維得,這是什麼黑科技

你不能說沒用,但糊也是真的糊。

這時 RawNeRF 的超神之處來了,它既可以讓夜晚的照片充滿細節,還可以幾乎完美去掉噪點!

一鍵能讓照片變成三維得,這是什麼黑科技

這叫什麼?這就是傳說中的 “ 照亮你的美,夜拍也清晰 ” 。

以往看似不太可能的事情,如今魚和熊掌我全都要。

但這還沒完,最 TM 離譜的是,

修復過的夜晚場景不僅變得更清楚了,甚至還能動起來!

一鍵能讓照片變成三維得,這是什麼黑科技

你還可以修改一些數值,比如調色或者重新對焦。。。

一鍵能讓照片變成三維得,這是什麼黑科技

能提升亮度,又能消除噪點,還能讓照片動起來,最後還能改變對焦點,

RawNeRF 不僅可以讓一張看上去沒救的照片起死回生,還能煥發二次生機。

雖說這個重新對焦的效果有時候看上去過於計算攝影,但已經能滿足大多數人的要求了。

RawNeRF 看上去有點過於強大,但它也不是一下就誕生的,

它其實基於一個叫做 NeRF 的技術進化而成。

NeRF 的全稱是一篇來自 2020 年的論文 Neural Radiance Fields ,而這裡面有一個叫做神經體渲染

( Neural Volume Rendering )

的技術引起了大家的注意。

一鍵能讓照片變成三維得,這是什麼黑科技

簡單來講,比如你對著一個物體拍攝了多張不同角度的照片,神經體渲染就會輸出一張擁有類似 3D 視角的照片,或者已經算是影片了,而且精細度還不差。

一鍵能讓照片變成三維得,這是什麼黑科技

面對某一個物體時,NeRF 也能夠準確地還原出來。

一鍵能讓照片變成三維得,這是什麼黑科技

不得不說,有點神奇。。。

而 RawNeRF 就像是更進一步的 NeRF ,它可以重建一張昏暗並且充滿噪點的照片中的場景。

影片中還展示了舊版的 NeRF 來處理夜景照片,雖說也能動起來,但畫面有一種說不上來的渾濁感。。。

一鍵能讓照片變成三維得,這是什麼黑科技

一眼合成,鑑定為 AI 作畫。

而新版 RawNeRF 則要好很多,雖然畫面還是有點糊,路燈處的光線過渡也不夠自然,但能達成這樣的效果已經相當離譜了。

一鍵能讓照片變成三維得,這是什麼黑科技

對了,RawNeRF 不僅能讓夜景照片清晰地動起來,

甚至還能在夜景的情況下生成出鏡面反光的效果。。。

一鍵能讓照片變成三維得,這是什麼黑科技

從提升細節、消除噪點,再到讓圖片動起來甚至重新對焦,這些全都是透過 AI 後期處理完成的。

在這份報告發出去之後,

研究人員也把相關程式碼 MultiNeRF 放在了 GitHub 上面。

一鍵能讓照片變成三維得,這是什麼黑科技

把程式碼放出來的其中一個原因,是因為普通使用者現在還不能親自體驗到這項逆天的黑科技。。。

要是想感受一下的話也可以,你需要先把程式碼給擼下來,

然後徒手搓一個指令碼出來。。。

接下來你需要不斷給 MultiNeRF 投餵素材,不斷讓它進行訓練,直到它對修圖這活兒非常熟練,就像文章裡提到的效果那樣。

一鍵能讓照片變成三維得,這是什麼黑科技

反正這事兒對於世超來說是超綱了,不過我會把連結放在文章底部,

如果你是一位大佬的話,那麼歡迎親自上陣。

不過有一點還是值得期待的,雖然這不是谷歌官方出品的研究報告和程式碼,但還是發在了 GitHub 的 Google Research 板塊。

一鍵能讓照片變成三維得,這是什麼黑科技

所以要是哪天被谷歌官方看上了,然後祝他們一臂之力,大家沒準還真能用上現成的 RawNeRF 。

https://github。com/google-research/multinerf

一鍵能讓照片變成三維得,這是什麼黑科技

開啟App看更多精彩內容

相關文章

頂部