谷歌在2021年底發布的Pixel 6系列手機,發布的時候可沒說手機具有心率監測、呼吸頻率檢測等功能。但是在系統軟件第一次大更新之后,竟然冒出來了這兩個新功能。這就有點讓人意外了。因為這可不是新增一個動態桌面、新增一個拍照模式那樣的升級,那些升級只需要改動軟件就能實現,而心率和呼吸的檢測,一直以來都是實打實需要額外增加硬件才能做到的。
那么,Pixel 6又是怎么做到的呢?是靠人工智能算法加持下的攝像頭和LED手電來實現的。這個檢測的實現原理是:打開檢測功能,然后把手機翻過來,背面的攝像頭和LED手電挨得很近不是?你把手指頭按在上面,同時壓住攝像頭和LED手電,然后就啟動檢測了。這時候,LED的強光會把手指照亮,你的指肚邊緣都被照得泛紅了。與此同時,攝像頭就在捕捉半透明的手指組織中、血管一張一縮導致的反射光的強弱變化。
這個變化再結合谷歌從收購的Fitbit那里獲得的人工智能算法,首先就得到了心率,然后通過計算擬合出呼吸頻率。你可能覺得,通過血管的搏動判斷心率還算靠譜,但怎么就能判斷呼吸頻率了?
其實,今天所有通過專門的硬件模塊完呼吸頻率監測的設備,也是通過類似的方法擬合計算出呼吸頻率的。比如說,我們戴的各種運動手環和手表,什么時候也沒讓你把它們湊到鼻子上去測呼吸吧?不同的是,那些專業運動檢測設備選用的光強和顏色更有利于統計反射光,所以精度更高。
那直接簡單粗暴地用手機里的LED手電發出的白光去測呢?在沒有人工智能加持的情況下,誤差就比較大了。但正因為人工智能是谷歌的強項,并且在反復測試中發現,經過人工智能的加持,不用那些專業模塊得到的精度和使用后是差不多的,于是這個功能就在第一次大更新后上馬了。
這當然是一個白給的新功能。但我們反著想,如果先在實驗中知道這么做可以,那其實相當于在手機的設計生產中就可以少買一個硬件模塊,照樣還能實現運動監控的功能。于是一個硬件被人工智能取代了,許多研發運動健康芯片的公司不開心了。
其實,不止谷歌的手機,小米手機也已經發現這樣行得通,但他們沒有用后攝像頭加LED手電,因為兩個組件離得比較遠,一個手指頭按不過來。
小米11手機有屏下指紋傳感器,工作起來就是,感應到手指按壓后發出強光,照射指紋,然后進行核對、解鎖。也同樣存在攝像和照明功能,也能看出血管舒張伸縮的節奏,這不就有心跳節奏了嘛。
不過,小米的手機并沒有檢測呼吸頻率,可能因為這個數值的誤差暫時還比較大。于是不止是小米,凡是采用了屏下指紋傳感器的手機,都可以無硬件成本地增加心率監測的功能。
人工智能取代攝像頭
其實,不止是心率的監測模塊被人工智能取代了,你應該還有印象,2018年之前的手機,頂部都會有一排攝像頭,所以做全面屏難度很大。這些攝像頭里,有的在今天就已經被人工智能完全取代了。比如說,專門承擔人臉識別任務的結構光攝像頭和ToF(飛行時間測距傳感器)。當時,許多廠商還在爭論這兩種方案到底哪個更有前途。但在2021年的新手機中,這兩個模塊全都不見了,大家都只用普通的前置攝像頭加人工智能算法來實現人臉識別。
之前,之所以不用前置攝像頭,是因為相比3D結構光或者ToF,前置攝像頭精度太差。和安全相關的功能,如果總是在判斷失誤下解鎖,那是不能接受的。但如今就不需要了。
而且更加令人意外的是,其實手機的前置攝相頭受限于空間和屏幕設計風格,已經超過2年沒有什么提升了。從2020年年初到今天,2年多過去了,旗艦機大都還在使用IMX615這個方案。
所以,人工智能算法實際上是在前置攝像頭本身性能沒有提升的情況下,大幅增加了人臉識別的準確度,達到了專業芯片才能有的準確度。而這樣的提升,又讓結構光攝像頭廠商和ToF傳感器廠商不開心了。
另外一個被人工智能取代的硬件,就是手機的后置攝像頭了。在2019年之前,各品牌的旗艦手機,尤其是號稱拍照牛的那些型號,大都配了4-5個攝像頭,分別是主攝、超廣角、長焦、潛望、獨立微距。比如小米手機CC9 Pro,當時的廣告宣傳叫作“五攝四閃10倍混合光學變焦”,手機背面許多圓圈圈。
照這個態勢發展下去,想要繼續提高手機拍照質量的話,除了手握的地方,估計都會開孔安裝攝像頭。但實際上,經過2年的發展,大部分頂級旗艦機里,獨立微距和長焦這2個攝像頭已經取消了。通過人工智能算法把主攝和超廣角捕捉到的數據糅合在一起,就是令人滿意的獨立微距攝像頭拍照的效果。而且,2019年之后,別看攝像頭數量減少了,但手機的拍照質量還在穩步地提升。
在DxOMark上的手機拍照排名里,使用五攝四閃10倍混合光學變焦的小米CC9 Pro拍照得分130,只使用3個攝像頭的小米11至尊版拍照得分148。這是在削減了2個攝像頭后,畫質提升一代的實質性超越。但實際上,減少了攝像頭,手機在成本上還節約了。
在人工智能算法的加持下,在精度上領先但功能上有替代的硬件,就能通過人工智能的加持變成魔法杖。人工智能不光減少了人力,增強了軟件功能,連一些硬件模塊也能取代了。