看板 MobileComm作者 bcs (= ="frailty..gggg XD)標題 [討論] M.Levoy離開Pixel團隊可能原因時間 Wed Oct 6 00:17:33 2021
https://tinyurl.com/y6zdemta
最近剛好看到這篇文章,內容是levoy離開pixel團隊後的cis方向。
從他對傳感器的看法,也許 可以了解為何最終離開pixel。
簡單來說 levoy想要朝bigger sensor,拉升snr,不太認同QB的做法。
G社當時可能想要利用ai克服QB猜色,然後就分手了。
期待新(***?)團隊的成果。
When you say 96 is a bad idea — much like we had megahertz wars for a while,
we did have a megapixel war for a minute.
#############
As I said, the signal to noise ratio is basically a matter of the total
sensor size. If you want to put 96 megapixels and you can’t squeeze a larger
sensor physically into the form factor of the phone, then you have to make
the pixels smaller, and you end up close to the diffraction limit and those
pixels end up worse. They are noisier. It’s just not clear how much
advantage you get.
Do you think any of the pixel bending or Quad Bayer techniques — because the
48-megapixel cameras, they still spit out a 12-megapixel photo by default —
do you think those help?
############
That remains to be seen. If you have four reds, four greens, and four blues,
that makes de-mosaicing — interpolating the reds, greens, and blues that you
don’t see — harder. Those Quad Bayer sensors have been subject to spatial
aliasing artifacts of one kind or another, zippering along rows or columns.
Whether that can really be adequately solved remains to be seen.
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 101.10.107.139 (臺灣)
※ 文章代碼(AID): #1XN7gXcq (MobileComm)
※ 文章網址: https://www.ptt.cc/bbs/MobileComm/M.1633450657.A.9B4.html
推 xoy: Marc現在在Adobe,也打算做手機的計算攝影,成果可能要等一陣子了2F 10/06 00:26
推 maplefff: 連pixel之父都受不了了, 看來效果真的不好
看還能繼續靠軟體唬弄幾代6F 10/06 00:31
推 parislove3: Google Health同樣是被AI至上文化所搞垮11F 10/06 00:54
→ square4: 用演算法、ai才是pixel迷人之處,不然大家都***大底、一億像素不就得了?12F 10/06 00:58
推 will3509111: 給樓上,第二個問題就是針對三星這種顏色解析度比輸出解析度低的這種CMOS(也就是高解析度但是能合併像素的CMOS,因為這種的Color Filter實際上是合併像素的大小而不是原生解析度的大小)14F 10/06 01:05
→ square4: 不知道是在說高畫素合併輸出以提高解析度嗎?18F 10/06 01:22
推 SRNOB: 我覺得levoy是對的 pixel 拍照好對焦快 可是爛傳感器
錄影的時候沒有ai根本比別人爛好幾代19F 10/06 01:47
推 DemonElf: Google雖然是明顯想以ai優先,但看起來也沒有固執不知變通,Pixel 6的感光元件就也都有大升級,另外錄影的部分照流出的先行測試也似乎有順利用上ai了22F 10/06 02:42
推 LuckSK: 感光升級,運算也要升級,這兩邊只要一邊沒調好就是整個拖垮25F 10/06 08:08
→ tr920: Google的演算法綁單一感光元件太深,優點是可以把一顆普通感光元件玩到出神入化,缺點是要換新的感光元件轉換成本很高,轉換開發時間也要拉長28F 10/06 09:48
→ Xperia: 都換大底了,六樓別活字自己世界
活在31F 10/06 09:56
→ bcs: levoy應該想走 iphone/sony sensor方案33F 10/06 10:21
推 DemonElf: 走iPhone/Sony sensor的模式? 也離事實太遠
人家levoy現在是去Adobe,志在讓不管什麼手機都能用上優秀的計算式攝影
在拍照上,真的還輪不到後面才跟上的iPhone來說嘴https://bit.ly/3DkfSVf
他跟Google背後這些連結與合作可深了,後續對雙方各自要再發展,前面一路來的試錯與經驗也是強大的累積而且bcs你這篇裡面不就也有主持人提問到iPhone的QA34F 10/06 11:47
→ wr: 拍照能靠計算畫出來 錄影就沒辦法了42F 10/06 12:05
推 DemonElf: 不是沒辦法,是之前還沒辦法,而Google想在Pixel 6做到的其中一件事,就是讓AI運算也能在錄影派上用場http://i.imgur.com/tzt2juC.jpg
「how much computation you can do」
就新的訪談看起來,levoy在大方向上還是跟Google是一致的,關鍵一樣是在於
「 the diminishing returns due to the laws of
physics」
除非你真的願意讓手機也變得更厚、更大台
而Pixel 6不僅是繼續強化ai的軟硬整合來加強運算
也讓他變更大台了...XD
不曉得levoy的志向在adobe的進展到什麼程度
不然以Google現在Pixel繼續在做的事,應該也是他會很樂意再繼續做的事
就我個人觀點,levoy在adobe想做到的事志向更高、也更難,要在不同的手機上都能良好運作的演算法,實在很難想像,看看一堆開發者在玩Gcam的經驗,要調到真的適用、好用,那都是個別要再下許多功夫去調參數的43F 10/06 12:08
推 Niubert: 給舒馬克開altis也進不了領先集團61F 10/06 12:33
推 xoy: 三星的人像錄影跟蘋果的電影級模式就是在搞計算錄影,Google在Pixel 6也預告會針對錄影加強,只是謎底還沒揭曉62F 10/06 12:36
推 kamichu: 可能這次客製ai晶片運算夠快才有辦法提高sensor的畫素吧66F 10/06 13:52
推 kamichu: 寫很多…一堆冗言…人判斷斷層片子本來就不會比ai厲害…最可怕的是用來機器學習的那些舊資料本身就很多誤判
問題從來是政治問題 就像自駕車到底能不能不裝方向盤一樣71F 10/06 14:05
推 benedict76: 這是單一領域問題,影像語音ai就是處理的不錯。76F 10/06 14:10
推 parislove3: 就當作參考 知道AI不是萬能就好
而kamichu這種全否定就duck不必 事實就是Google Health失敗散了 敗在AI文化上77F 10/06 14:20
→ kamichu: Google health十年前就有了吧 一直說失敗散了也很奇怪 科技業底下的組織本來就改動迅速 第一次看到害怕ai到這種程度…
當初搞網路藥局 醫療資訊整合服務 最後搞ai 那天組織重整完 端出來的是什麼誰知道80F 10/06 14:27
推 benedict76: 跟"人"有問題的沒那麼容易啦!ai早就取代一些人了,當然讓人怕怕的。85F 10/06 15:48
推 DemonElf: 特別花時間看了一下paris那篇文章,這不就是很明顯是「人」的問題嗎,一堆豪華陣容最直接的問題就是怎麼整合、聽誰的?
既然知道不應該把ai當萬能,怎麼又會覺得ai的應用就都不會失敗,別說是ai了,任何的新創成功機率本來就都高不到那去,但成功推動的價值就無可限量
願意嘗試都是好事,不要過度神化或甚至欺騙就好
之前那個女版賈伯斯的案例才是真正的「經典」
Google也不過就是試失敗了就收掉,而其他一堆蓬勃發展的ai成功案例也是並存、依舊值得期待87F 10/06 17:28
推 shadowppt: 你認為imx363用N年真的是因為HW不換嗎?呵呵呵97F 10/06 19:13
--