高通在ChinaJoy上的AI元素，讓我看到泛娛樂(lè)時(shí)代的美麗圖景

泛娛樂(lè)，是基于互聯(lián)網(wǎng)和移動(dòng)互聯(lián)網(wǎng)多領(lǐng)域共生而形成的，泛娛樂(lè)時(shí)代，人們消費(fèi)的是娛樂(lè)內(nèi)容，但有一個(gè)領(lǐng)域同樣不容忽視，那就是承載豐富娛樂(lè)內(nèi)容的智能終端。

泛娛樂(lè)時(shí)代，人們娛樂(lè)的形式、內(nèi)容、時(shí)間地點(diǎn)變得豐富而多樣，對(duì)于智能硬件的要求也更多，不僅要求強(qiáng)大的性能，更要有良好的交互，豐富的功能……為了滿足這些需求，有一項(xiàng)技術(shù)受到各行各業(yè)的普遍關(guān)注，那就是AI。

當(dāng)智能終端融入了出色的AI能力，就能為廣大消費(fèi)者提供更加豐富有趣的智能泛娛樂(lè)體驗(yàn)。這一點(diǎn)在今年剛剛舉行的ChinaJoy上也有深刻體現(xiàn)，作為移動(dòng)連接技術(shù)提供商的高通，就通過(guò)豐富的AI技術(shù)演示，為我們展現(xiàn)了AI驅(qū)動(dòng)的精彩的智能泛娛樂(lè)生活。

驍龍主題館，隨處可見(jiàn)的AI與娛樂(lè)

今年的ChinaJoy上，高通再次聯(lián)合眾多生態(tài)合作伙伴打造驍龍主題館。在巨大的驍龍主題館里，從智能手機(jī)到移動(dòng)電競(jìng)，從Wi-Fi路由器到極具沉浸感的AR設(shè)備，高通為廣大硬核玩家、游戲發(fā)燒友和驍龍粉絲打造了一個(gè)充滿科技感、智慧感、新鮮感的數(shù)字娛樂(lè)嘉年華，這其中就有很多基于AI技術(shù)實(shí)現(xiàn)的娛樂(lè)方式。

比如，作為高通長(zhǎng)期合作伙伴的虹軟，就在驍龍主題館現(xiàn)場(chǎng)展示了3D紙片人總動(dòng)員的技術(shù)，在演示中，我們看到，智能手機(jī)只需要拍攝平面上的一處繪畫內(nèi)容，這個(gè)二維圖像就可以快速化身3D“紙片人”，并且以AR的形式呈現(xiàn)，用戶還可以與之互動(dòng)，非常有趣。

3D紙片人總動(dòng)員利用智能手機(jī)攝像頭的AI視覺(jué)技術(shù)識(shí)別平面中的圖案，然后通過(guò)算法將這個(gè)圖案轉(zhuǎn)換成3D模型，最后輸出3D立體的“紙片人”，這種創(chuàng)新的交互方式，可以讓我們使用智能手機(jī)增添許多樂(lè)趣，比如未來(lái)你就可以和小伙伴各自快速創(chuàng)建一個(gè)“紙片人”，然后用AR的形式彼此互動(dòng)，妙趣橫生。

除了紙片人總動(dòng)員，虹軟在現(xiàn)場(chǎng)還演示了單攝3D建模的黑科技，這個(gè)技術(shù)可以讓智能手機(jī)隨時(shí)隨地對(duì)現(xiàn)實(shí)對(duì)象進(jìn)行掃描，無(wú)論是人還是物體，都可以立刻生成同比例、高精度、高逼真度的3D虛擬模型。IT之家在現(xiàn)場(chǎng)能夠發(fā)現(xiàn)，這個(gè)生成的虛擬模型具有精細(xì)的紋理和圖像采集，真實(shí)還原了原來(lái)物體的色彩和細(xì)節(jié)，整體效果還是很出色的。

并且，針對(duì)生成的人物、動(dòng)物或者卡通3D模型，再結(jié)合AR算法和AI技術(shù)，這個(gè)模型能夠觀察用戶的肢體動(dòng)作或者手勢(shì)，和用戶進(jìn)行互動(dòng)。這個(gè)技術(shù)將AI與建模、AR結(jié)合在一起，形成虛擬的立體形象，相信在未來(lái)數(shù)字娛樂(lè)領(lǐng)域會(huì)有很廣泛的應(yīng)用，比如利用很多個(gè)這種快速建模的形象進(jìn)行的游戲等等，可以大大豐富人們的娛樂(lè)生活。

更重要的是，完成3D建模的手機(jī)哪怕只有單攝像頭也能完成，這其中涉及到很強(qiáng)的AI識(shí)別能力，均是在于高通合作的基礎(chǔ)上實(shí)現(xiàn)的。

除了虹軟，在ChinaJoy驍龍主題館的現(xiàn)場(chǎng)，還有很多與AI相關(guān)的技術(shù)演示，都可以在智能泛娛樂(lè)領(lǐng)域發(fā)揮重要作用。比如下面這個(gè)來(lái)自相芯科技的AI虛擬形象技術(shù)，你只需要站在攝像頭面前等待3秒，就可以在屏幕上看到卡通版的自己，這個(gè)卡通的虛擬形象會(huì)和你的外貌很相似，你的面部特征、頭發(fā)類型、胡子類型等等，都可以變成可愛(ài)又有趣的卡通形象，你的表情變化，卡通形象的表情動(dòng)作也會(huì)隨之變化，看起來(lái)惟妙惟肖。這個(gè)技術(shù)在現(xiàn)場(chǎng)吸引了很多人駐足觀望，大家都很想知道自己在卡通世界里會(huì)是什么樣子，也覺(jué)得自己有一個(gè)虛擬版的形象是一件很酷的事情。

現(xiàn)場(chǎng)的相關(guān)技術(shù)人員告訴小編，這個(gè)虛擬形象是通過(guò)云服務(wù)器在云端形成的，同時(shí)客戶端的SDK也會(huì)用于進(jìn)一步對(duì)虛擬形象進(jìn)行個(gè)性化定制和互動(dòng)，這個(gè)過(guò)程借助了高通驍龍移動(dòng)平臺(tái)的AI能力以及XR技術(shù)，結(jié)合相芯科技自己的虛擬化身相關(guān)技術(shù)，共同呈現(xiàn)了有趣的二次元風(fēng)格虛擬形象。

目前這個(gè)技術(shù)已經(jīng)有了實(shí)際的應(yīng)用，比如小米上半年發(fā)布的小米11 Ultra內(nèi)置的萌拍Mimoji 3.0版本，就使用了相芯科技技術(shù)。驍龍888為萌拍Mimoji 3.0提供了強(qiáng)勁的AI算力和圖像信息處理技術(shù)的支撐，從而讓萌拍Mimoji 3.0能夠在較低功耗水平下的完成高質(zhì)量的面部二次元虛擬渲染。

說(shuō)到AI驅(qū)動(dòng)攝像頭實(shí)現(xiàn)的趣味玩法，IT之家在驍龍主題館現(xiàn)場(chǎng)還看到了更多由驍龍888帶來(lái)的豐富的AI影像演示。

比如中興手機(jī)就在現(xiàn)場(chǎng)展示了搭載驍龍888移動(dòng)平臺(tái)的三主攝影像旗艦Axon 30 Ultra，這款手機(jī)搭載了三顆同樣6400萬(wàn)的超感光主攝、超人文主攝、超廣角主攝，巨大的像素量在進(jìn)行AI運(yùn)算時(shí)是一個(gè)巨大的考驗(yàn)，驍龍888移動(dòng)平臺(tái)搭載的第6代高通AI引擎則可以輕松應(yīng)對(duì)。

在驍龍888 AI能力的加持下，Axon 30 Ultra可以實(shí)現(xiàn)有趣的影像玩法，例如在現(xiàn)場(chǎng)你就可以體驗(yàn)一鍵拍攝全焦段照片的功能，照片在不同焦距間自由縮放，實(shí)現(xiàn)“先拍照、后變焦”，此外我們還看到了多攝同拍同錄、超級(jí)月亮Ultra模式、希區(qū)柯克變焦等創(chuàng)新影像玩法。無(wú)疑，這些由強(qiáng)大AI能力帶來(lái)的新鮮影像玩法，能夠讓消費(fèi)者們的娛樂(lè)生活更加多彩。

還有更高階的AI應(yīng)用，比如小編在現(xiàn)場(chǎng)還看到了創(chuàng)屹科技Future Mind專業(yè)機(jī)器人與現(xiàn)場(chǎng)體驗(yàn)者進(jìn)行“AI乒乓球電競(jìng)”對(duì)戰(zhàn)，讓參與者領(lǐng)略數(shù)字競(jìng)技體育的別樣魅力。

Future Mind專業(yè)機(jī)器人采用高通Cloud AI 100平臺(tái)，利用強(qiáng)大的的人工智能技術(shù)識(shí)別并捕捉、分析高速運(yùn)動(dòng)狀態(tài)下乒乓球的位置，更與引入了高通的邊緣側(cè)運(yùn)算平臺(tái)進(jìn)行快速的AI運(yùn)算，最終能夠在于人類的較量中不落下風(fēng)。

總之，今年ChinaJoy的驍龍主題館中，你可以處處感受到AI技術(shù)是如何極大豐富廣大消費(fèi)者的泛娛樂(lè)生活的，它通過(guò)在過(guò)去很難想象的智慧化能力，結(jié)合各種硬件終端，為我們娛樂(lè)生活開(kāi)拓出很多新的場(chǎng)景，新的玩法。

而這些AI技術(shù)和能力的來(lái)源，大部分都來(lái)自高通驍龍移動(dòng)平臺(tái)的AI引擎，特別是本屆ChinaJoy上隨處可見(jiàn)的驍龍888移動(dòng)平臺(tái)，其第6代高通AI引擎正是一眾創(chuàng)新玩法的背后功臣。

應(yīng)用落地，不止于驍龍888的第6代高通AI引擎

在AI技術(shù)炙手可熱的今天，我們已經(jīng)聽(tīng)過(guò)太多遍關(guān)于AI的美好暢想。但是將AI落地到實(shí)際應(yīng)用中卻并不是容易的事，不僅需要強(qiáng)大的算力、技術(shù)支撐，還需要有完整的解決方案，有終端承載，有聯(lián)動(dòng)產(chǎn)業(yè)上下游的能力。而這些，對(duì)于驍龍888的第6代高通AI引擎而言，對(duì)于高通而言，都不是困難，而是優(yōu)勢(shì)。

高通很早就開(kāi)始了對(duì)AI的研究，在終端側(cè)專門引入AI技術(shù)也是從驍龍820移動(dòng)平臺(tái)這一代就開(kāi)始了，到驍龍888，AI引擎已經(jīng)經(jīng)歷了6代的積累和發(fā)展，為智能手機(jī)向“智慧化”發(fā)展作出了重要的貢獻(xiàn)。

在第6代高通AI引擎上，高通將人工智能引擎的整體算力提高到了26TOPS，相比上一代的15TOPS有巨大的提升，如此強(qiáng)大的算力為終端在各種場(chǎng)景下的廣泛應(yīng)用提供了保障。

而第6代高通AI引擎算力提升的背后，包含了高通的眾多技術(shù)創(chuàng)新。首先我們知道，AI引擎并不是一個(gè)單獨(dú)的NPU單元，而是整合了CPU、GPU、Hexagon處理器等SoC的內(nèi)部運(yùn)算資源，并通過(guò)合理的實(shí)時(shí)調(diào)配機(jī)制實(shí)現(xiàn)的統(tǒng)一的AI框架。

在驍龍888移動(dòng)平臺(tái)上，Kryo 680 CPU和Adreno 660 GPU都有顯著的升級(jí)。Kryo 680 CPU用上了全新CPU架構(gòu)，是行業(yè)首個(gè)采用Arm Cortex-X1架構(gòu)的移動(dòng)平臺(tái)，這令CPU整體性能提高25%，同時(shí)整個(gè)CPU叢集的整體功效也提高了25%。而Adreno 660 GPU的圖形性能相比上一代Adreno 650提升了35%，能耗相比于上一代則降低了20%。在參與AI運(yùn)算時(shí)，Adreno 660 GPU的AI性能也有43%的提升。

更重要的是驍龍888移動(dòng)平臺(tái)采用的Hexagon 780處理器。這款張量處理器采用了融合AI加速器架構(gòu)。所謂的融合AI加速器架構(gòu)，意思就是在之前驍龍865的Hexagon處理器中，有標(biāo)量、張量和向量加速器，但他們是分開(kāi)的，而在驍龍888的Hexagon 780處理器中，這些加速器之間的物理距離幾乎消失了。

同時(shí)，高通還在這三個(gè)不同加速器之間添加了很大的共享內(nèi)存，從而讓他們更快、更高效地共享和移動(dòng)數(shù)據(jù)。高通稱，專用共享內(nèi)存的加入讓Hexagon 780在單一應(yīng)用中的性能提升16倍，在某些應(yīng)用中，數(shù)據(jù)交互時(shí)效最多可提高上千倍。

再具體到這些加速器自身，性能也得到了提升，標(biāo)量加速器的性能提升了50%，而張量加速器的處理速度是前代的2倍，更重要的是，在性能上漲的同時(shí)，它們還提升了每瓦特性能，能效相比前代提升3倍之多。由此可見(jiàn)，全新的Hexagon 780處理器對(duì)第6代高通AI引擎性能躍遷貢獻(xiàn)極大。

除了這些提升算力的升級(jí)，在第6代高通AI引擎架構(gòu)中，高通還整合了第2代高通傳感器中樞。第2代高通傳感器中樞中，高通增加了一顆專用的、始終開(kāi)啟的、低功耗的AI處理器，令傳感器中樞AI性能提升達(dá)5倍。這種額外的AI處理能力使Hexagon處理器可以將高達(dá)80%的工作負(fù)載分擔(dān)給傳感器中樞，從而做到更加省電。高通傳感器中樞進(jìn)行所有處理所需的功耗僅僅不到1毫瓦。

全新第2代高通傳感器中樞的存在，讓搭載驍龍888移動(dòng)平臺(tái)的終端能夠時(shí)刻保持AI處理能力的待命，讓智慧化的能力始終在線。

總之，驍龍888移動(dòng)平臺(tái)搭載的第6代高通AI引擎已經(jīng)擁有頂尖的AI處理能力和完善的AI功能。當(dāng)然，只有這些還不夠，AI技術(shù)的落地還需要有承載它的終端。而根據(jù)高通中國(guó)區(qū)董事長(zhǎng)孟樸的透露，到今年7月，全球已經(jīng)有130多款基于驍龍888的終端，終端廠商們充分利用了驍龍888旗艦平臺(tái)的領(lǐng)先AI特性，將他們應(yīng)用在智能手機(jī)的各個(gè)體驗(yàn)環(huán)節(jié)中，包括影像、游戲、音效等等，例如我們前面提到的小米11 Ultra內(nèi)置的萌拍Mimoji 3.0，還有紅魔游戲手機(jī)6R的TC游戲補(bǔ)幀技術(shù)等等，都通過(guò)AI技術(shù)為用戶的娛樂(lè)生活帶來(lái)了諸多樂(lè)趣。

除了與終端廠商的合作，高通還采取了更多措施方便開(kāi)發(fā)者調(diào)用第6代高通AI引擎的能力，更積極與應(yīng)用軟件的開(kāi)發(fā)商合作，推動(dòng)更多AI娛樂(lè)應(yīng)用的落地。

比如說(shuō)，在第6代高通AI引擎中，高通擴(kuò)展了用于AI加速器的開(kāi)源編譯器TVM，支持Hexagon?，F(xiàn)在，開(kāi)發(fā)者可以用幾行簡(jiǎn)短的Python代碼編寫自定義算子，為Hexagon編譯，并直接插入高通AI引擎Direct框架。這無(wú)疑可以幫助開(kāi)發(fā)者更方便、更全面地調(diào)用驍龍888第6代高通AI引擎的能力，創(chuàng)造出更多智能且實(shí)用的娛樂(lè)應(yīng)用。

再比如，高通還一直在和全球知名的社交應(yīng)用Snapchat合作，而Snapchat目前正在使用驍龍888的AI模型增效工具包，量化他們的一系列AI鏡頭模型，以提高人臉識(shí)別的準(zhǔn)確性和性能。這樣，用戶就可以即時(shí)應(yīng)用最新的濾鏡，在社交娛樂(lè)中獲得更多的樂(lè)趣。

通過(guò)第6代高通AI引擎的強(qiáng)大性能，高通以驍龍888為整體解決方案，并借助智能手機(jī)等移動(dòng)終端，將這種AI能力應(yīng)用于多樣化的泛娛樂(lè)場(chǎng)景中，并于產(chǎn)業(yè)上下游合作，真正將AI服務(wù)于普羅大眾的娛樂(lè)生活，令現(xiàn)實(shí)因?yàn)橛辛薃I的存在而更加五彩紛呈。

結(jié)語(yǔ)

如果把泛娛樂(lè)時(shí)代海量創(chuàng)新、好玩、豐富的娛樂(lè)場(chǎng)景比作春天土壤里開(kāi)出的滿山坡的花朵，那么AI，就相當(dāng)于一場(chǎng)場(chǎng)春雨，潤(rùn)物細(xì)無(wú)聲，將萬(wàn)紫千紅爭(zhēng)奇斗艷的繁榮景象帶到人們面前。

而云聚成雨，高通就像催動(dòng)春雷萌動(dòng)的的云層，他們用自我在技術(shù)上的探索努力和廣泛的合作推動(dòng)了AI的落地和應(yīng)用，讓技術(shù)真正能夠普惠大眾，讓泛娛樂(lè)時(shí)代的花園更加艷麗多姿，美不勝收。