電子發(fā)燒友網(wǎng)報(bào)道（文/李彎彎）據(jù)報(bào)道，在近日召開的Google Cloud Next 2022上，谷歌CEO桑達(dá)爾·皮查伊介紹了在全息視頻聊天項(xiàng)目（Project Starline）上取得的一些進(jìn)展。

Project Starline是谷歌內(nèi)部高度保密的實(shí)驗(yàn)項(xiàng)目之一，根據(jù)谷歌的研究院透露，項(xiàng)目小組在6年前就已經(jīng)開始相關(guān)的技術(shù)研究。直到去年5月，桑達(dá)爾·皮查伊首次在Google I/O大會(huì)上向公眾發(fā)布，在此之后又沉寂了幾乎一整年。

最新進(jìn)展和體驗(yàn)效果

在近日的Google Cloud Next 2022上，桑達(dá)爾·皮查伊表示，Starline 項(xiàng)目已經(jīng)在谷歌內(nèi)部進(jìn)行了數(shù)千小時(shí)的測試，并在其美國辦公室每天使用，而100多個(gè)橫跨媒體、醫(yī)療和零售的企業(yè)合作伙伴已經(jīng)收到了演示。

谷歌還宣布Project Starline正在進(jìn)入下一個(gè)測試階段，計(jì)劃是在選定的合作伙伴辦公室部署設(shè)備進(jìn)行定期測試，谷歌提到的合作伙伴包括Salesforce、WeWork、T-Mobile和Hackensack Meridian Health，這些設(shè)備預(yù)計(jì)將在今年年底前完成安裝，開啟初試。

谷歌為什么花費(fèi)大量時(shí)間開展Project Starline呢？根據(jù)項(xiàng)目組給出的答案，就是讓人在通話的時(shí)候，感覺你是和一個(gè)真正的人在一起。在如今的社會(huì)中，人們通常會(huì)相隔千里，尤其是近兩年疫情頻繁發(fā)生，人們不得不通過Zoom等遠(yuǎn)程會(huì)議軟件，進(jìn)行聯(lián)系、溝通工作。

然而當(dāng)下視頻會(huì)議給人的感覺并不好，根據(jù)微軟一份關(guān)于視頻會(huì)議對(duì)工作效率的影響的報(bào)告，人們?cè)谝曨l會(huì)議中會(huì)比顯示溝通更容易分析，這是人們?cè)诿鎸?duì)高壓力的視頻會(huì)議下的自然應(yīng)對(duì)反應(yīng)。而谷歌認(rèn)為，能提供真人對(duì)話體驗(yàn)的Project Starline，似乎能夠消除這種壓力感。

谷歌的研究員做了對(duì)比實(shí)驗(yàn)，他們發(fā)現(xiàn)相比傳統(tǒng)視頻溝通，使用Project Starline溝通的參會(huì)者會(huì)有更多眼神接觸和肢體語言，在溝通結(jié)束后能夠回憶的內(nèi)容也要多出28%。

Project Starline給人的真實(shí)體驗(yàn)效果到底如何呢？在測試階段，Project Starline邀請(qǐng)了包括The Verge在內(nèi)的媒體和合作伙伴進(jìn)行了親身體驗(yàn)。The Verge編輯Jay Peters在體驗(yàn)后感嘆到，這是他迄今為止體驗(yàn)過的最真實(shí)的一次虛擬現(xiàn)實(shí)交互，感覺像是科幻小說照進(jìn)現(xiàn)實(shí)。



Jay Peters表示，Project Starline就像一塊具有魔法的窗戶，將兩間房間連接在一起，坐在他對(duì)面的谷歌研究員看起來和真人的高度、長相幾乎一致，當(dāng)他遞過來一個(gè)蘋果時(shí)，他甚至能夠通過畫面上的陰影感受到近似真實(shí)世界的空間距離感。

這就像是一場發(fā)生在同一張桌子上的兩個(gè)人，在面對(duì)面進(jìn)行交流。Project Starline在標(biāo)準(zhǔn)辦公環(huán)境下就可以運(yùn)行，而且使用者無需佩戴任何設(shè)備。

硬件構(gòu)成和工作原理

Project Starline看上去像是一個(gè)精致的梳妝臺(tái)，人坐下來之后，前面是一塊65寸的大屏幕。據(jù)介紹，這是一塊8K/60Hz的3D光場顯示器。谷歌的研究員稱，這塊顯示器單眼可觀測的像素密度是Oculus Quest等VR設(shè)備的兩倍，可以有更精細(xì)的立體顯示效果。

Project Starline的工作原理是，通過傳感器和攝像頭，從不同角度捕捉人像，再利用深度學(xué)習(xí)進(jìn)行實(shí)時(shí)壓縮，將這些數(shù)據(jù)傳輸?shù)綄?duì)面，在顯示屏上重建實(shí)時(shí)3D模型。再配合高級(jí)的聲音系統(tǒng)，構(gòu)建了一個(gè) 3D全息電話亭。

從分布來看，光場顯示器想要顯示出好的立體效果，需要采集物體的深度信息，谷歌的研究員，在屏幕的上方和底部都安裝了多個(gè)雙目立體相機(jī)和紅外相機(jī)，這樣能夠結(jié)合多角度的深度信息，還原出人物的空間距離感。

在屏幕的兩側(cè)和上方還安裝了多個(gè)單色跟蹤攝像頭，用于對(duì)人物兩部五官的實(shí)時(shí)3D定位，這樣當(dāng)人物移動(dòng)的時(shí)候，也能夠精準(zhǔn)地還原人物模型。


這是在視覺方面，為了營造面對(duì)面溝通交流的逼真感，谷歌在聽覺方面也下了很多功夫。

在輸入端，麥克風(fēng)可以配合臉部追蹤的數(shù)據(jù)形成具有指向性的動(dòng)態(tài)波束，以實(shí)現(xiàn)降噪和抗干擾。在輸出端，追蹤系統(tǒng)能定位觀眾的耳朵，模擬出對(duì)話的空間方位感，讓聲音聽起來就像是屏幕中人像的嘴巴說出來的一樣。

是否會(huì)成為下一代通信手段

隨著信息技術(shù)的發(fā)展，人類的通訊手段也在不斷升級(jí)。1844年5月24日，美國薩繆爾·莫爾斯在華盛頓國會(huì)大廈，向40英里以外的巴爾的摩，發(fā)出了人類歷史上第一份長途電報(bào)。電文內(nèi)容是《圣經(jīng)·舊約申命記》中的一句話："What hath God wrought!"。

這份電報(bào)為人類開啟了信息時(shí)代的大門。此后，電報(bào)技術(shù)迅速在歐美大陸普及，并逐漸傳遞到世界各個(gè)角落。然而電報(bào)作為早期的通訊手段，使用起來并不方便。

1875年，美國發(fā)明家亞歷山大·貝爾和他的助手發(fā)明了第一臺(tái)電話誕生。不同于電報(bào)，它是一種通過直接傳送人類聲音的通訊方式。1876年2月14日，貝爾在美國專利局申請(qǐng)電話專利。1878年，貝爾成立了電話公司，并實(shí)現(xiàn)了波士頓和紐約之間相距300公里的長途電話試驗(yàn)。從此，電話很快在北美各大城市盛行起來，并且迅速風(fēng)靡全球。

1973年，馬丁·庫帕發(fā)明的第一部手機(jī)誕生。不過一直到1985年，才誕生出一臺(tái)現(xiàn)代意義上的、真正可以移動(dòng)的電話。1987年，手機(jī)進(jìn)入中國。

從早期的電報(bào)文，電話，到手機(jī)，人類通訊傳遞的信息內(nèi)容，從文字，到聲音，到視頻影像，信息傳遞的及時(shí)性和內(nèi)容都在不斷提高。那么未來人類通信手段如何才能更先進(jìn)呢？除了信息傳遞的及時(shí)性外，內(nèi)容可不可以更豐富。

比如Project Starline所實(shí)現(xiàn)的3D影像，如同真人面對(duì)面溝通。Project Starline可能就是人類下一代通信應(yīng)該有的樣子。

不過從目前的情況來看，Project Starline距離實(shí)際應(yīng)用，還有諸多問題。

Wired的編輯Lauren Goode在參與測試體驗(yàn)過后表示，當(dāng)人物移動(dòng)幅度過大時(shí)，原本立體的圖像就會(huì)短暫變回平面，體驗(yàn)并不完美。谷歌的研究員也提到，在處理形狀復(fù)雜，比如蓬松的毛發(fā)、光學(xué)眼鏡等，或者運(yùn)動(dòng)物體的時(shí)候，時(shí)常有錯(cuò)誤的偽影出現(xiàn)。

另外，谷歌開展Project Starline的研究，目標(biāo)用戶是B端企業(yè)，可以用于人數(shù)眾多的集體會(huì)議。然而因?yàn)?D全息視頻通話的時(shí)候，計(jì)算機(jī)時(shí)刻需要進(jìn)行大量計(jì)算，谷歌的這臺(tái)設(shè)備目前僅支持一對(duì)一聊天，這在未來的應(yīng)用場景上就會(huì)受限。

更為重要的是，裝配一套Project Starline，成本相當(dāng)高，光場顯示器和各種光學(xué)攝像頭都非常昂貴，這使得Project Starline短期內(nèi)只能停留在實(shí)驗(yàn)室，而進(jìn)入消費(fèi)者市場的可能性很小。Project Starline的產(chǎn)品管理總監(jiān)Andrew Nartker稱，目前它還很難稱得上是一件產(chǎn)品。

整體而言，Project Starline是一個(gè)全新技術(shù)的探索，谷歌也會(huì)繼續(xù)對(duì)其進(jìn)行優(yōu)化改進(jìn)。未來，它能否成為一個(gè)真正的產(chǎn)品還未可知。不過無論怎樣，任何一項(xiàng)新技術(shù)的探索都值得被關(guān)注。