即構科技：玩法技術升級，賦能泛娛樂一站式出海

2022年，反復的疫情仍在影響著全球各行各業(yè)的發(fā)展。宅經(jīng)濟的持續(xù)，使得線上社交、游戲、音視頻等泛娛樂產業(yè)需求不斷增長。

即構科技在2022年5月發(fā)起“音浪頻動·GO出?！敝黝}沙龍全國行活動，旨在分享即構科技與生態(tài)合作伙伴的全球化經(jīng)驗，共建能力，“讓每個APP更好的出?！?，共同探討中國互聯(lián)網(wǎng)出海的最新玩法和最強動力。

5月27日，該系列活動迎來了第一站——即構科技、快出海聯(lián)合舉辦的《音浪頻動·GO出?！烦鞘猩除垼ㄎ錆h站），在武漢光谷希爾頓酒店圓滿舉辦。

會上，即構科技資深出海解決方案架構師Cony，在《玩法+技術雙重升級，泛娛樂一站式出海玩法》的主題演講中，基于泛娛樂出海趨勢和場景分析，介紹了即構科技在玩法和技術等方面，為出?？蛻籼峁┑膭?chuàng)新解決方案。

即構科技資深出海解決方案架構師Cony

泛娛樂出海實時化，正在成為主流趨勢

近兩年里，國內泛娛樂領域的競爭壓力大、市場趨于飽和，不少泛娛樂產品企業(yè)，都有了出海的念頭。而第三方數(shù)據(jù)報告，也佐證了泛娛樂應用在海外市場的潛力——中國非游戲廠商出海應用收入排行榜TOP30，超過一半的企業(yè)都在社交和泛娛樂領域。

同時，受到全球疫情影響，宅家娛樂需求呈現(xiàn)持續(xù)增長。這給以實時音視頻技術為基礎的社交、短視頻和直播等泛娛樂行業(yè)提供了發(fā)展環(huán)境。

在演講中，Cony分享了一組data.ai的數(shù)據(jù)，2022年中國廠商社交&泛娛樂應用出海下載量排名Top1000的榜單中，出海社交企業(yè)逾70家，接近92.3%的企業(yè)接入了RTC SDK。由此可見，泛娛樂出海實時化，正在成為主流趨勢。

為解決出海企業(yè)對于實時性提出更高要求，以及在直播、游戲、社交，更多創(chuàng)新性內容方向上對超低延時、虛擬世界，元宇宙等方面的要求，即構科技通過對主流產品的用戶畫像進行分析，能夠在語聊房、互動播客、在線K歌、游戲語音、視頻直播5個產品方向，為出?？蛻籼峁┙鉀Q方案。

根據(jù)Cony的介紹，Z世代是現(xiàn)在主流產品所面向的用戶群體。他們具有“追求熱鬧、多元的體驗；追求共處一室，有交互性，沒有空間距離感的用戶體驗；希望在所有的產品體驗里，能夠縮短彼此的距離?！钡奶刭|。這些用戶硬性需求催生了下述產品方向。

第一個是語聊房。在這里相同興趣愛好的人在一個房間里聊天，提供多人實時音頻聊天的場所，用戶可選擇隨時上麥發(fā)言，下麥收聽?！皬奈覀兊臄?shù)據(jù)上看，語聊房屬于Z世代最喜歡的一個社交方式?！?/p>

為此，即構科技對語聊房所需的實時音頻（超低延遲，弱網(wǎng)抗性）、麥位管理、防炸麥、3A處理（回聲消除，噪聲抑制，自動增益）、特殊音效（變聲，混響，均衡器，美聲等）、審核鑒黃、百萬級超大房間等關鍵能力，都相對應地給出了解決方案。例如針對3A處理，即構科技通過自研的3A處理算法，保證超保真的音效應用在直播場景中。

互動播客方面，即構科技也進行了定向產品優(yōu)化。針對所有產品需要用到海外調優(yōu)，以及網(wǎng)絡帶寬質量，能夠非?？焖俸屯暾靥峁┕δ芙槿?。

在線K歌，涉及的玩法非常豐富。其中合唱玩法對于超低時延，以及歌詞的時間對齊有很高的技術的要求。“就目前的廠商來說，我們應該是TOP1。在實時合唱里，我們可以把這個延時做到70ms以內?！边@個數(shù)據(jù)意味著，人們在唱歌過程中不會發(fā)現(xiàn)有任何時延。

隨著K歌場景的實時性、互動性越來越高，對于音視頻技術、網(wǎng)絡帶寬、設備性能的要求也越來越高。Cony表示，針對出海場景，即構科技還在持續(xù)壓縮超低時延，以保證全球復雜網(wǎng)絡環(huán)境下的優(yōu)質體驗。此外還對連麥合唱歌手、聽眾做了一些具體的優(yōu)化。

游戲語音，涉及3D音效、范圍語音和小隊語音。其中3D音效，能夠按照我們物理位置的設定，控制聲音的大小，從而在一些音頻設備里，能夠聽到有一個方向性的聲音。在應用層面上，游戲語音能讓用戶的體驗更具臨場感，“如果客戶是有考慮過做元宇宙，或者說一些游戲類的實時音頻傳輸?shù)姆较?，是可以考慮把它接入的。”

視頻直播方面，即構科技針對出海面臨的“畫質”和“延時”問題，也進行了相應的提升。一方面提升畫質和真實感的處理；另一方面推出“暢直播”，利用即構科技提供的RTC服務節(jié)點，幫助出海企業(yè)規(guī)避由于當?shù)谻DN廠商質量和服務問題造成的延時。

泛娛樂社交玩法2.0，賦能出海企業(yè)

除了上述提到的幾個大方向，泛娛樂社交的玩法，可以延伸非常多的種類。

Cony在現(xiàn)場提出“泛娛樂社交玩法2.0”，通過即構科技提供的技術底層保障，幫助出海企業(yè)尋找新的增長曲線。具體而言這些技術保障，涉及社交+K歌、社交+Avatar、社交+小游戲、虛擬世界、實時語音轉譯等方面。

針對“社交+K歌”，即構科技不僅能提供70ms超低時延，還在KTV場景，提供版權保障。據(jù)悉，國內版權方面，即構科技已經(jīng)與騰訊音樂娛樂集團旗下“音速達引擎”成為戰(zhàn)略合作關系，支持200萬+正版歌曲。海外版權合作也正在進行中。

不僅如此，即構科技還一站式提供九大場景化組件——唱歌打分、片段演唱、曲庫組件、歌詞組件、房間管理、麥位管理等必要場景化功能——能夠幫助客戶在最短時間內，在自身產品中接入完整的線上K歌場景。

“社交+Avatar”，即構科技能夠提供AI捏臉，手動捏臉換裝、100%表情隨動的產品體驗。通過攝像頭對人臉精準識別，生成用戶的虛擬形象，并將該虛擬形象與常見的1V1連麥、語聊房、K歌、直播等玩法進行融合，打造個性化更高、互動性更強的泛娛樂產品。

此外，Avatar還能應用在元宇宙中。通過攝像頭采集人臉特征，生成的用戶虛擬形象，對應著實際人臉表現(xiàn)，通過這種表情的關聯(lián)，打破線上線下的邊界。

社交+小游戲”，包含語音互動類、桌游類、實時PVP類、秀場直播類、棋牌類等，通過即構科技給出的解決方案，能將多種類型小游戲與語聊房、秀場直播等場景進行深度融合，一站式接入?？蛻粼谑褂眠^程中，也能夠便捷地將小游戲引入進已有產品體系，“直接使用我們這邊提供的SDK，只要幾行代碼，游戲資源，畫面，PVP的一些服務，就能全部集成到客戶產品上?！?/p>

據(jù)Cony介紹，所有成功的直播平臺，并不只有單純的直播場景，而是會加入非常多趣味性和強交互性的設計，因此像小游戲這一類型產品，會成為出海領域中，非常有用的利器。

在虛擬世界的設計過程中，除在產品側思考是否需要虛擬世界，需要怎樣的虛擬世界，以及怎樣做到虛擬世界，還要在技術側思考，需要設計哪些部分的技術，而這也就產生了以下兩個問題。

第一問題是如何實現(xiàn)虛擬世界里所有數(shù)據(jù)的一個實時性交互？“圍繞著這個問題的解決，即構科技推出了一個產品，可以理解為我們能夠用最低的一個延遲，盡可能多地把我們在虛擬世界房間內的一些信息，或者說一些數(shù)據(jù)流，去傳遞給到對方?！?/p>

第二個問題是虛擬世界里要怎么樣開發(fā)？Cony解釋道，雖然沒有辦法確定客戶對于虛擬世界的理解，或者說他對于虛擬世界的設計是什么樣的。但是即構科技會盡可能地讓所有需求和場景，盡可能地還原到線上。通過給出一整套產品方案，保證客戶快速上線虛擬世界。

實時語音轉譯，對于出海產品而言也是一項利器，打破語言和區(qū)域障礙。具體應用中，可以在外語主播的界面上實時生成字幕。該功能背后采用的AI語音識別技術，是即構科技專門針對全球各地的語音做的模型，有超過125種語音的變體覆蓋。

Cony指出，雖然AI能實現(xiàn)自動識別，但過程中肯定會有一定的延時?！拔覀儸F(xiàn)在已經(jīng)把延時時間控制在300ms以內。足夠在一些在線教育場景，讓它發(fā)揮字幕的最大價值。”

在演講中，Cony還列舉了即構服務多個不同客戶的玩法實踐。例如穩(wěn)居中東語音社交第一平臺的Yalla，旗下包含主打語音聊天場景的Yalla和主打游戲社交的Yalla Ludo。分別彌補了中東地區(qū)陌生人語音社交的空白，以及向用戶提供了“一起玩”場景，在棋牌等游戲里融合實時語音互動。在中東地區(qū)實現(xiàn)了穩(wěn)定的收入和口碑表現(xiàn)。

元宇宙產品Oasis，在實時語音交流，電影玩法上也做得很好。通過向用戶提供了多種3D場景，用戶可以進入空間進行實時語音交流、一起看電影、一起玩游戲等玩法。

StarMaker是一款基于在線K歌和音樂社區(qū)的語音社交產品。在應用中可以開啟視頻直播、1V1連麥PK、1V2連麥的秀場直播玩法，基于該玩法，主播可以和自己的粉絲進行實時互動，也可以和其他主播連麥合唱、PK等。此外，StarMaker還上線了語聊房場景，主播可以創(chuàng)建房間并與8名聽眾實時語音聊天。

TT語音為玩家提供組隊開黑、隊友匹配、娛樂互動、電子競技等多種趣味娛樂化的游戲及語音互動場景。即構科技在合作期間，打造了滿足Z世代語音社交需求的娛樂方案，并向TT語音提供了相親、Pia戲房、單人K歌、直播房的語音房方案。隨著體驗升級，即構科技還向TT提供了“實時合唱+音樂版權+打分”一站式方案，全方位滿足TT語音的K歌升級場景需求。

即構實時云助力全球業(yè)務最佳體驗

上述提到的云錄制、IN、暢直播等產品矩陣以及相對應的產品形態(tài)，都囊括在音視頻云平臺總體架構中。為了更詳細理解即構實時云，Cony基于直播產品出海面臨的體驗問題和原因，以“暢直播”為例，詳細介紹了即構科技在流暢度、畫質、語音、抗弱網(wǎng)特征、全球機型覆蓋、數(shù)據(jù)安全保障等方面的解決方案。

直播產品出海之所以會遇到畫面模糊、卡頓、加載時間變長等常見問題，造成直播體驗變差，主要是因為三方面的原因：其一，是當?shù)鼐W(wǎng)絡環(huán)境復雜，地區(qū)之間網(wǎng)絡差異巨大，跨網(wǎng)，CDN質量不穩(wěn)定；其二是由于終端設備機型種類繁多，部分地區(qū)低端機型占比高問題復雜；其三是成本問題，如何平衡RTC做直播、高清畫質、復雜的全鏈路數(shù)據(jù)監(jiān)控系統(tǒng)，帶來的成本壓力，將有限的資源用在高收益的地方。

而數(shù)據(jù)顯示，直播體驗會影響用戶觀看時長、營收情況。例如畫質提升，觀看時長也會有對應的提升，而延遲每增加4s，人均看播時長就下降了1.3%。電商直播音量均衡開啟，人均GMV增加4%。因此，有必要優(yōu)化直播產品出海的體驗。

為解決直播產品出海的體驗問題，即構科技通過“暢直播”給出了如下解決方案。

在流暢度升級方案中，一個直播SDK，一次接入，即可獲得CDN直播、CDN Plus、L3等多種服務，并可針對地區(qū)、人群等多種維度，通過控制臺、API等設置差異化服務。

畫質升級方面，利用選擇合適的編碼器（H.264、H.265；軟編、硬編）、選擇合適的編碼配置集、低碼高清編碼模式、ROI、視頻后處理技術、清晰度優(yōu)先流控策略等手段，進行畫質升級優(yōu)化。

其中，超分是畫質升級方案中的黑科技。通過在接收端通過一定的算法處理，提高原有圖像的分辨率，解決由推流端、網(wǎng)絡傳輸端能力不足造成的不清晰問題。為了更好理解這項技術，Cony舉了一個簡單的例子：開啟超分，能夠直接可以在本地把720P的銳化成類似1080P，不僅能夠帶來畫質增益，還能盡可能的節(jié)省帶寬的成本。

針對語音場景，即構科技提供AI降噪技術。對麥克風采集的聲音進行降噪處理，在原有的穩(wěn)態(tài)噪聲正常處理的情況下，還會處理非穩(wěn)態(tài)噪聲，主要包括鼠標、鍵盤聲、嘈雜餐廳、環(huán)境風聲等非人聲噪聲。

抗弱網(wǎng)的特征方面，即構科技也給出了一些指標承諾：上或下行70%丟包下，可保持10-15幀視頻流暢通話；上或下行80%丟包下，可保持音頻流暢通話；上或下行90%丟包下，可保持70%不掉線。而在針對智能QoS方面，Cony也提到，“針對不同的帶寬情況，產品會做不同的流量控制，從而保障大家在觀看視頻的時候，能夠有非常流暢的體驗?！?/p>

此外基于即構科技海量用戶數(shù)據(jù)，公司對全球3萬多終端設備進行適配，同時還對中低端機型特別優(yōu)化，以降低硬件壓力。

在演講的最后，Cony也提到了用戶隱私和數(shù)據(jù)安全問題。由于海外每個地區(qū)，每個國家的法律政策不一樣，即構科技目前能夠提供海外合規(guī)方面的經(jīng)驗，在數(shù)據(jù)隔離、數(shù)據(jù)安全等方面，賦能客戶。