楠木軒

元宇宙大玩家!網易瑤臺未來要做什麼?我們和負責人劉柏聊了聊

由 長孫秀芬 釋出於 科技

劉柏告訴遊戲日報,網易瑤臺的下一個目標是讓使用者從“開會議”轉向“辦活動”,目前正在談一些長期入駐的客戶。今年的主要計劃包括上線安卓APP、提前佈局VR、推進場景編輯器以及提升並行舉辦活動(場次、規模方面)的能力。

本文為遊戲日報【元宇宙100人】系列文章。

有朋友在和遊戲日報交流時曾表示“如果網易瑤臺都做不起來,那這個行業(元宇宙)也做不起來”。這個評價或許有些極端,但不可否認瑤臺是當下元宇宙概念落地產品中跑在最前面的“大玩家”,多位接受遊戲日報採訪的元宇宙從業者也或多或少提到過對瑤臺的關注。

本期【元宇宙100人】遊戲日報邀請到了網易瑤臺的負責人劉柏。劉柏是技術研發出身,於2013年加入網易雷火,2017年進入網易伏羲人工智慧實驗室,負責雷火大資料系統、網易伏羲雲計算系統以及沉浸式活動系統網易瑤臺的開發。

網易瑤臺負責人 劉柏

瑤臺是怎麼理解這個行業的發展和機遇的?它是怎麼做的產品,未來又打算做什麼?帶著這些問題,遊戲日報和劉柏聊了聊,以下為採訪實錄:

Q:目前網易瑤臺的團隊規模如何?大傢俱體在做哪些方面的分工?

劉柏:現在有近百人全職在做瑤臺專案,另外還有很多網易雷火遊戲事業群和網易伏羲人工智慧實驗室的同學在支援這個專案開發。具體配置和遊戲團隊職能分工類似,包括產品研發、美術、Web前後端和做雲遊戲的等等。

Q:瑤臺的雲遊戲開啟方式怎麼理解?

劉柏:簡單來說就是使用者想要訪問網易瑤臺,不用單獨裝一個APP或者客戶端,只需要在瀏覽器裡開啟即可。它首先還是會有APP客戶端的,這個客戶端雲化後串流到服務端,然後透過服務端的雲端渲染能力,把可互動的音影片流串流到使用者側,也就是瀏覽器。這樣更方便使用者進入瑤臺辦活動。

Q:瑤臺作為一款產品的完成度到哪裡了?在團隊未來構想中還會做哪些產品服務?

劉柏:目前網易瑤臺的定位就是一個沉浸式虛擬活動系統,使用者可以利用瑤臺來舉辦各種型別的會議,包括偏正式的國際會議,釋出會、營銷類峰會和線上展會等,只從這個方向來看完成度相對是比較高的。不過瑤臺並不只是想讓大家在裡面開會,還想讓大家在裡面“辦活動”

這個思路上,網易瑤臺是作為活動平臺,它的使用者分為三類:

第一類是活動主辦方,他透過瑤臺提供的服務可以低成本、高效率地舉辦一場有儀式感、有沉浸感和有傳播性的活動;第二類是活動參與使用者,他們可以在瑤臺上參加演唱會、釋出會,看電影、看球賽、玩劇本殺、聽相聲等等;第三類使用者則是線上活動催生的新角色,瑤臺引入了虛擬空間的概念,大家在使用瑤臺的時候是用虛擬角色進入到虛擬空間,那麼誰來建設虛擬角色和虛擬空間?這裡需要的就是美術資源提供方。他們可以利用美術能力豐富瑤臺,創造出的虛擬美術資產可以通過出租或者出售的形式給到活動主辦方,從而賺取收益。

所以我們是希望把瑤臺變成開放式的線上系統,裡面既有活動的生產者也有活動的消費者,共同打造出一個生態系統

在網易瑤臺裡放一場煙花

Q:這個方向是不是可以理解為做UGC平臺的思路?

劉柏:UGC肯定是很重要的一個方面,但這裡面也缺少不了PGC,也就是更專業的人來做出一些有品牌效應或者標杆效應的活動場景。PGC這塊目前是瑤臺自己在做,我們的美術團隊已經做了十幾個核心線上場景,比如不同風格的會議室、拍賣廳、展示廊、展覽展會等等。不過目前瑤臺還是封閉式的,最終我們還是要做開放式系統,能讓大家自己在瑤臺上打造專屬的活動空間。

Q:您前面提到希望有活動的舉辦方來實現使用者看演唱會、聽相聲等,那目前瑤臺是否有“在平臺擁有固定空間,能長期提供服務活動入口”的案例?

劉柏:網易瑤臺目前是有這樣的能力的,現在我們也在談一些能長期入駐其中的客戶。因為目前瑤臺的主要參與方式還是透過雲遊戲來訪問,渲染能力放在雲端,現在採購雲端的算力還是瑤臺在付錢,它的成本相對比較高,這限制了使用者長期佔據空間的門檻。所以我們現在正在做移動端,完成之後就可以使用手機算力,不需要太多的雲端渲染能力了。所以等移動端上線後我們會重點去推,吸引一些長期使用者到瑤臺中

Q:我們這個移動端大概什麼時候會推出?

劉柏:目前已經在內測了,大概到8月份左右,安卓平臺會上線。APP上線後,瑤臺的主攻方向就會從會議轉向活動,因為前者基本上是一次性的,而活動則是長期的。

Q:瑤臺的標籤是沉浸式活動系統,從使用者體驗的層面來講,使用瑤臺和其他產品對比,其更好的沉浸感表現在什麼地方?

劉柏:對比線上開會這種傳統系統,比如說ZOOM,它是偏工具型的產品,會非常重視效率,只能透過語音和影片的方式來互動。而網易瑤臺則是有虛擬空間的,使用者以虛擬角色進入後能產生更多互動,用Facebook的觀點來講,就是傳統的web1.0和web2.0產品還是在瀏覽平面的內容,而到了web3.0,我們本身就在這個內容之中。對比起直接看網頁的無空間無互動,和VR看房這樣的有空間無互動,瑤臺肯定是有更強的沉浸感。當然它還是有很大的向上提升空間的,最終還是要透過VR來訪問瑤臺,VR的下一階段可能就是腦機介面了,後者離我們比較遠,VR我們已經在做了。

Q:VR這塊是打算在APP推出後加速推進嗎?

劉柏:客觀上講,VR裝置的市場滲透率比較低,但是VR一定是未來的趨勢,網易瑤臺也已經做好了面向VR的準備。目前網易瑤臺已經做了個VR的Demo,可以來展現豐富的產品內容。按照VR產業的進度來看,預計2023年可能會有一波兒爆發。所以瑤臺在2022年會持續做一些相應的佈局,選一些有實力的廠商,把瑤臺接入到對方系統中

Q:前段時間我使用瑤臺參加過釋出會和展會活動,發現瑤臺在功能設計方面還是挺豐富的,不過隨著產品升級功能增多,使用者理解門檻也會隨之提升,這方面瑤臺是怎麼考慮的?怎麼判斷新功能要不要加入到產品中?

劉柏:這是一些使用者在使用瑤臺時必然會遇到的問題,我們設計瑤臺的時候使用了很多遊戲產品互動的習慣,例如用鍵盤上的WASD來移動或者用滑鼠點選移動,以及用滑鼠右鍵按住來拖動旋轉視角,這些對於遊戲使用者來說是很熟悉的操作,但是瑤臺面向的使用者型別遠比遊戲玩家複雜,比如其中有一些四五十歲完全沒遊戲經驗的使用者,怎麼讓他們快速低成本的學會使用瑤臺就是一個挑戰。我們自己也覺得在互動方面有較大的提升空間,最近我們正在做一個新版本的瑤臺,這個版本對使用者學習成本的要求更低一些

我們肯定會把最核心的功能提供給使用者,例如音影片聊天、舉手發言,再加上我們正在做的場景編輯器等。而不是說我覺得使用者需要就加進去,這會變成很龐大複雜的系統。其實遊戲產品團隊也面臨著類似的問題,我們也從那邊學習到很多思路,用於瑤臺的設計。

網易伏羲虛擬人的人工智慧技術

Q:瑤臺是怎麼實現“使用者現實表情實時遷移到虛擬空間”的?主要應用於具體的哪些環節場景?

劉柏:我大概是05年的時候在微軟研究院宣講會上接觸到了這部分,影片裡呈現出來一個人做動作,動畫形象也隨之做動作的情況,那個時候肯定還要用到專用裝置和複雜的演算法,不過在如今人工智慧技術發展水平下,我們已經可以做到用普通的硬體裝置,例如膝上型電腦的攝像頭,結合網易伏羲虛擬人的人工智慧技術來實現實時流暢的表情動作遷移。

早期這個功能我們只在小範圍的聊天中開放,不過後來發現會議型別的主講人在講臺上站著,雖然也有一些呼吸動作,但是表現力不夠,所以我們就做了針對講師發言的表情動作遷移。未來我們會把這個功能逐漸擴大應用範圍,這需要考慮到算力的問題,因為要用到GPU目前成本是比較高的,不過我覺得隨著晶片國產化的落地,算力成本肯定會大幅下降。

Q:瑤臺目前實現了用AI把使用者的臉型匯入到虛擬形象上,未來我們會考慮不只是臉型,做真人虛擬形象這個路線嗎?

劉柏:網易伏羲的AI捏臉技術已經做了很久,應該是業界最早推出的,我們有不少重要的遊戲產品都用了伏羲虛擬人的人工智慧捏臉技術,我們現在也是做的偏寫實風格。至於高精度的捏臉/捏人,我覺得從使用者角度來說短期內還是不太需要。比如我們去看歌星表演,實際上還是想要看真人而不是虛擬人,所以我們在瑤臺也做了綠幕直播的技術,大家可以在綠幕房間把現實形象動作實時推送到瑤臺裡面。

Q:前面也提到過網易瑤臺在設計系統時使用到了一些遊戲化思維,這在產品中具體有哪些呈現?落地到瑤臺時做了哪些調整?

劉柏:目前來看,瑤臺需要的技術棧和遊戲研發技術棧是趨同的,網易在遊戲研發方面經驗豐富,所以我們肯定會借鑑很多思路,包括開發工具和開發流程。不過相比於遊戲產品上的邏輯,做到瑤臺裡會更簡單一些。比如遊戲做戰鬥系統一個大招附近的敵人都要去掉,但瑤臺並沒有必要去做這種系統。

當然瑤臺也有它的特殊需求,例如我們會希望一個場景中能渲染出更多的參會者,如果是開一場會議,我坐在虛擬空間靠後的位置能不能看到舞臺上的領導,就是瑤臺要去解決的問題。遊戲裡面遠處的人和道具實際上不需要渲染,但是在瑤臺裡至少要把領導和臺上的嘉賓渲染出來,臺上的嘉賓往下看的時候會不會遠處的座位都是空的?這也是瑤臺要去解決的問題。所以在渲染最佳化這塊,瑤臺需要花很大的精力去做好每一處細節。

MCON Festival Live首屆品牌元宇宙營銷沉浸式千人峰會在網易瑤臺舉辦

Q:目前瑤臺的場景是網易直接去提供的,合作方是直接接入,如果未來需要客戶自己來佈置場景元素,操作門檻會不會太高?

劉柏:這個核心就是UGC和PGC怎麼去選擇的問題,從我自己的角度來看,UGC確實有做的很好的,但是整體比例是比較低的,仍舊是要靠大量的PGC來支撐。另外其實我們在網易伏羲下面,是可以藉助AIGC的,也就是透過人工智慧來構建。具體來說首先是要加速美術資產的製作,然後場景佈局方向可以藉助AI的能力,這個東西我們已經應用在了《逆水寒》上。另外網上現在不是有個職業叫捏臉師嘛,可以參考照片高精度的做進遊戲裡,未來我要在瑤臺辦一場活動,希望裝修成一個樣子,其實也可以找第三方來在虛擬世界“蓋房子”。

Q:瑤臺近期主要在研究哪些功能改動和體驗提升?

劉柏:我們內部定了一個指標,就是想提升瑤臺並行舉辦活動的能力。第一個是如果舉辦人數較少的簡單會議,我們希望不要有明顯的上限,同時開幾百場、幾千場都可以。第二個是做定製化的活動,產研階段和線上實施階段分別可以進行多少場;第三個是瑤臺有沒有能力去接超大型的會議,例如幾萬人、幾十萬人參與。

這是我們現在主要在提升的能力,它是比較綜合的,需要很細緻地進行拆解。我們暫時沒有做超大型的活動,很希望有甲方來找我們合作一起推進。

Q:團隊在尋找瑤臺產品調整方向形態的時候,主要是考慮本身的階段性規劃還是客戶提出的最佳化需求?

劉柏:兩方面都是有的,首先我們自己肯定有階段性規劃,需要清楚能做哪些事情。現在我們正在做的一個方向就是場景編輯器,逐步開放給使用者。另外我們在接觸客戶的過程中也會收到來自一線的需求,我們會仔細評估後再決定要不要做進版本里面去。

Q:網易瑤臺開闢出市場後,出現了一些更垂直於具體行業的競品,您認為瑤臺積累了哪些優勢來保證競爭力?

劉柏:網易瑤臺做的比較早,大概是在2020年5月份立項開始的,那時候元宇宙概念還沒起來,我們也不清楚自己是元宇宙產品,當時就叫沉浸式會議系統,發展方向就是用來開會,第一個與我們合作的客戶是南京大學。應該是在2021年Q4元宇宙概念熱度拉起來了,然後就出來很多廠商做元宇宙產品,出現垂直的友商是好事情,說明大家是認可這個方向的。

從現階段來看,這裡強調下定語是現階段,我們認為元宇宙系統和遊戲研發的系統是比較一致的,而網易在遊戲方面又有很多的經驗,可以把經驗搬到瑤臺。另外也包括招人,以遊戲為例,並不是說招了很強的研發和美術就一定能做出成功的遊戲,而網易長時間的積累瑤臺可以直接拿來用。所以我們認為瑤臺的優勢就是基於這些底蘊,所以會走得比較快。

Q:您認為外部哪些技術的突破會推動我們這個領域的發展?

劉柏:網路限制、算力限制和人工智慧演算法限制,我覺得現在面臨的主要就是這三個方面的技術問題。

首先是網路方面,我們肯定希望更加低的延遲和更高的頻寬,雲遊戲技術幫助瑤臺使用者實現透過瀏覽器一鍵登入會議的便捷體驗, 而云遊戲又是5G的應用嘗試之一。我國在5G方向上的發展水平在世界中很突出,所以未來5G會幫助瑤臺實現更好的推廣。然後咱們前面也說到了,晶片國產化落地後是會降低算力成本的。最後是人工智慧演算法,現在已經進入到了深度學習的領域,表現會有很大幅度的提升,瑤臺的表情系統和真人還是有差距的,而演算法的提升會推動瑤臺的向前發展。

Q:我在和一些團隊去聊的時候,發現大家都會有提到一個擔憂,就是疫情推動了這個型別產品的需求,那疫情結束後,線上需求是不是會受影響?瑤臺怎麼看這個問題?

劉柏:我相信每個人都希望疫情儘快結束,但是疫情客觀上確實是推動了這類專案的發展,因為很多傳統的活動大家已經習慣了線下的方式,如果沒有疫情完全沒有動力去換新方式。從我們的角度來看,疫情倒逼大家去嘗試了線上活動、會議後,也體會到了線上的一些好處,並在逐漸接受這種方式。

我舉個例子,網易每年都要舉辦網易未來大會,去年在園區裡有個會場,需要做到一個很大透明玻璃球的效果,但肯定不能直接用玻璃,實際上是用了透明的塑膠來模擬做玻璃球。那天早上我看到十幾個工人協作在裝,然後等中午吃完飯後幾個小時了他們還在安裝,我就跟同事說如果在線上瑤臺裡去做這個玻璃球,5分鐘就能做好,想做多大就能做多大,這就是線上辦活動的好處之一。

2022《永劫無間》職業聯賽釋出會在網易瑤臺舉辦

疫情持續了一段時間了,但是未來它總會結束,那我們現在做的和友商正在做的產品是不是就涼了?我覺得這要具體分領域,有一些不管有沒有疫情都會逐漸往線上靠攏,有一些則是因為疫情影響才往線上搬

我舉個前者的例子,比如說我打算辦一場藝術展,會出現幾方面的花銷,首先要租一個像樣的場地,本身就比較貴,然後要布展裝修成我需要的風格,另外還要把展品運到場地來,為了保護這些產品還需要上保險,仍舊不排除可能出現問題的情況。所以如果把這個藝術展放在線上來做,那成本和擔憂全都沒有了。再比如說學術研討會,可能只需要開一兩個小時,但路上花費的時間和外地差旅的開銷就需要很高。這些情況即便是疫情結束了,他們也會傾向於在線上來推動,而網易瑤臺等線上平臺只要把功能做好、做完善就可以了。

而如果是線上演唱會,我覺得疫情結束後可能就不行了,因為使用者希望體驗的是現場的效果,而這方面線上平臺需要很大的提升發展才有可能追上線下體驗。

Q:所以瑤臺也會更注重前面這種需求對應功能的完善是吧?

劉柏:對的,做哪方面應用肯定要仔細想過,疫情促進了大家思考,要提前去預判疫情結束之後環境會發生什麼改變。

Q:聊聊元宇宙產業的一些問題。瑤臺認為元宇宙未來的終極形態是什麼樣的,希望未來在元宇宙扮演什麼角色?

劉柏:元宇宙有個很有意思的現象,那就是近景很遠、遠景很近。

所近景很遠,就是很多東西都可以說自己是元宇宙,比如《紅樓夢》《西遊記》漫威等,這比較符合一個新生事物的情況,早期萌芽階段沒有統一定義,很多東西都可以靠上來,大家都是很有熱情的,不過具體到落地和終極形態上就是講未來了。而元宇宙的遠景又非常清晰,其實就是《頭號玩家》裡的狀態,大家用VR眼鏡或者是腦機介面進入到另一個和現實相通的虛擬世界,好像結果已經擺在了那裡,只需要去實現就好了。

當然,從技術角度來看,我們距離元宇宙的遠景還是比較遙遠的。

瑤臺是希望能夠找到適合自己的細分行業去深挖,過程中不斷積累經驗,向元宇宙遠景的狀態去趨近。從我自己的角度來看,短時間內還很難達到元宇宙的中期狀態。

在瑤臺舉辦的自然生態公益攝影展

Q:目前關於元宇宙落地有兩個方向的大方向是比較有爭議的,一部分人認為其未來是企業或者城市服務,另一部分人認為娛樂才是真正的使用者需求場景,您怎麼看這兩個方向?

劉柏:我覺得很難確定誰排在前面一些,按照我自己的理解,元宇宙首先是個開放式的系統,它和現實世界是有一定互動的,我們可以到元宇宙裡學習、娛樂、工作和生活。隨著人類在元宇宙世界裡花的時間越來越多,超過了現實世界達到了一個臨界點,就真正進入到元宇宙之中了,所以無論娛樂方向還是企業/城市服務都是重要方向。

Q:智慧城市也是元宇宙的一種落地方向,目前瑤臺有在做這個方向的嘗試嗎?

劉柏:現在有些客戶在跟我們做類似的東西,更偏向數字孿生產品。舉個例子,我能不能在元宇宙中做一個銀行,和線下銀行的功能是一致的,有服務人員、能買基金能做儲蓄,也能做銀行相關的介紹等,如果復刻這樣的線下場景到元宇宙中,能夠玩轉吸引到大量使用者,那對於其現實銀行的品牌也肯定是有幫助的。這就是元宇宙的連線現實的一種形式,如今可以是銀行,未來也可以是城市。

Q:您覺得咱們提到的這個打通線上線下的未來構想,想要實現的話需要解決什麼問題?

劉柏:如果我們想要做一個線上的城市,我覺得至少需要做到兩個方面。第一個是有網易瑤臺或者或者其他元宇宙產品,它必須是一個開放式的場景,能夠匯聚使用者來共建。因為城市規模太大了,單靠一個團隊幾千人都很難做成,所以得能讓第三方使用者在其中建設自己的場景;第二個是要在技術上有大場景的承載能力,它主要是服務端引擎的問題,網易伏羲有個自研的ACE引擎就是自動做分散式承載大場景的服務端引擎,這是必不可少的。

北大光華碳中和前沿沙龍在網易瑤臺舉辦

Q:元宇宙涉及到很多概念,包括虛擬人、AI、雲遊戲、AR/VR等,您認為近幾年那個領域的發展可能比較快?

劉柏:我先講AI吧,它已經是個很大的產業了,確實我們也已經透過AI解決了很多問題,甚至有一些做AI技術的公司成為了上市公司。然後是虛擬人,這個行業剛剛起步,整體來說產值不是很大,不過我自己很認可虛擬人未來的市場空間。最後VR也是虛擬空間發展的必然選擇,我前面就說了網易瑤臺的沉浸感距離VR有差距的,我們自己做了嘗試,用VR裝置進入到瑤臺和坐在電腦前看瑤臺是完全不同的體驗。