原文作者：平臺(tái)研發(fā)部，智能服務(wù)與產(chǎn)品部

距離加文·伍德提出web3.0已經(jīng)過(guò)去8年時(shí)間，這8年加文·伍德創(chuàng)建的以太坊大放異彩，同時(shí)由web3.0引出的數(shù)字人、元宇宙也生根發(fā)芽，茁壯成長(zhǎng)，帶來(lái)了非凡的用戶體驗(yàn)。

在互聯(lián)網(wǎng)產(chǎn)業(yè)都在尋求打造元宇宙新生態(tài)系統(tǒng)的背景下，數(shù)字人擔(dān)任著信息制造、傳遞的責(zé)任，是連接虛實(shí)世界、增進(jìn)用戶體驗(yàn)必不可少的一部分，是元宇宙“人-物-場(chǎng)”鏈接的新介質(zhì)。京東金融APP為了給用戶提供更好的用戶體驗(yàn)，在產(chǎn)品、價(jià)格、服務(wù)三個(gè)緯度上，不斷追尋最佳的業(yè)務(wù)表達(dá)和信息傳遞方式，在數(shù)字人應(yīng)用方面大膽嘗試并取得了初步的成果。

一、用戶體驗(yàn)需求——從傳統(tǒng)的圖文展示、上下滑動(dòng)到個(gè)性化交互

截至2021年我國(guó)互聯(lián)網(wǎng)滲透率已達(dá)73%，在互聯(lián)網(wǎng)人數(shù)增長(zhǎng)和人均上網(wǎng)時(shí)長(zhǎng)增長(zhǎng)上已趨于穩(wěn)定。通過(guò)對(duì)Z世代用戶體驗(yàn)需求進(jìn)行調(diào)研和分析，Z世代用戶有自己的文化圈層、圈層語(yǔ)言、特征喜好，他們的行為愛(ài)好有著鮮明的特色，他們不再局限于視角、聽(tīng)覺(jué)的網(wǎng)絡(luò)傳播互動(dòng)，而是追求更近一步的產(chǎn)品體驗(yàn)，他們有著對(duì)體驗(yàn)升級(jí)的需求，行業(yè)內(nèi)急需一個(gè)新的突破點(diǎn)來(lái)滿足其需求。

諾貝爾物理學(xué)獎(jiǎng)獲得者喬治·斯穆特曾說(shuō)過(guò)：“虛擬現(xiàn)實(shí)的未來(lái)不在于構(gòu)建魔術(shù)般的幻境，而是為現(xiàn)實(shí)生活帶來(lái)積極改變?！被ヂ?lián)網(wǎng)時(shí)代的交互體驗(yàn)主要是2D信息的表達(dá)，而在最近十年我們正擁有了創(chuàng)建3D世界的技術(shù)，未來(lái)當(dāng)我們可以在虛擬世界中無(wú)比真實(shí)地感覺(jué)到空間和時(shí)間，我們有望接近4D的階段，即虛擬與現(xiàn)實(shí)共生，而我們認(rèn)為這有可能是交互體驗(yàn)最終的階段。

作為國(guó)內(nèi)金融科技行業(yè)的TOP應(yīng)用，京東金融APP必須要滿足未來(lái)用戶的偏好，嘗試滿足Z世代的產(chǎn)品形態(tài)，是我們用戶體驗(yàn)提升的一部分。在對(duì)互聯(lián)網(wǎng)行業(yè)和集團(tuán)內(nèi)的技術(shù)能力進(jìn)行洞察后，我們?cè)诙鄠€(gè)技術(shù)方向上進(jìn)行了大膽的嘗試，其中數(shù)字人就是其中高價(jià)值的一環(huán)。數(shù)字人等相關(guān)技術(shù)將幫助我們構(gòu)建平行的社會(huì)，打破已經(jīng)持續(xù)已久的人機(jī)交互體驗(yàn)瓶頸，由人機(jī)交互過(guò)渡到人人交互。要具備真實(shí)意義的社交體驗(yàn)就需要有感情連接，要讓人有歸屬感才能支撐其基礎(chǔ)的社會(huì)宇宙社交方式，不能只是傳統(tǒng)的文字、語(yǔ)音、視頻的形式，更多的是個(gè)性化交互的需求升級(jí)。

二、保持技術(shù)前瞻性- 洞察行業(yè)和政策發(fā)展趨勢(shì)

縱觀各行業(yè)發(fā)展史，每個(gè)階段的突破都是在數(shù)量積累到一定的極限后引起質(zhì)變的?；ヂ?lián)網(wǎng)交互形態(tài)演進(jìn)也遵循這樣的發(fā)展規(guī)律，由web1.0到Web3.0每個(gè)階段都是一個(gè)由量到質(zhì)的突破。

靜態(tài)互聯(lián)網(wǎng)時(shí)代的交互體驗(yàn)，在Web1.0時(shí)代，也就是PC互聯(lián)網(wǎng)時(shí)代，是一個(gè)群雄并起，逐鹿網(wǎng)絡(luò)的時(shí)代。用戶利用web瀏覽器通過(guò)門(mén)戶網(wǎng)站，單向獲取內(nèi)容，主要進(jìn)行瀏覽、搜索等操作。用戶只是被動(dòng)接受內(nèi)容，單純的人機(jī)通信，沒(méi)有互動(dòng)體驗(yàn)；移動(dòng)互聯(lián)網(wǎng)時(shí)代的交互體驗(yàn)，在Web2.0時(shí)代，用戶不再只是內(nèi)容接收方，可以在線閱讀、點(diǎn)評(píng)、制造內(nèi)容，成為內(nèi)容的提供方，還可以與其他用戶進(jìn)行交流溝通，提供服務(wù)的網(wǎng)絡(luò)平臺(tái)成為中心和主導(dǎo)，聚集起海量網(wǎng)絡(luò)數(shù)據(jù)； 大互聯(lián)時(shí)代的交互體驗(yàn)，在Web3.0時(shí)代，典型特點(diǎn)是多對(duì)多交互，不僅包括人與人，還包括人機(jī)交互以及多個(gè)終端的交互，一開(kāi)始僅僅是大互聯(lián)時(shí)代的初期，真正的Web3.0時(shí)代一定是基于物聯(lián)網(wǎng)、大數(shù)據(jù)和云計(jì)算的智能生活時(shí)代，實(shí)現(xiàn)了“每個(gè)個(gè)體、時(shí)刻聯(lián)網(wǎng)、各取所需、實(shí)時(shí)互動(dòng)”的狀態(tài)，也是一個(gè)“以人為本”的互聯(lián)網(wǎng)思維指引下的新商業(yè)文明時(shí)代。

Web3.0是一場(chǎng)體驗(yàn)變革，也讓互聯(lián)網(wǎng)更加智能化、人性化。通過(guò)3D圖形、AR/VR/XR、可穿戴設(shè)備、人機(jī)接口等技術(shù)的應(yīng)用，為用戶帶來(lái)前所未有的交互感、參與感。它讓“元宇宙”從概念逐漸走向現(xiàn)實(shí)，基于上述技術(shù)，再疊加邊緣計(jì)算、5G、云計(jì)算、AI等新一代信息技術(shù)，讓打造“全息互聯(lián)網(wǎng)”成為可能，虛擬世界與現(xiàn)實(shí)世界的距離被拉近、邊界變得模糊，個(gè)人體驗(yàn)也從感知實(shí)體世界向虛擬世界延展。在元宇宙的通用架構(gòu)圖中也可以看到，虛擬形象（數(shù)字人）是元宇宙的技術(shù)核心。

在宏觀政策方面，國(guó)家大力支持數(shù)字經(jīng)濟(jì)，近一年北京元宇宙商標(biāo)注冊(cè)量位列第一，其次是廣州、深圳、上海；另外，11月1日五部委聯(lián)合發(fā)布《虛擬現(xiàn)實(shí)與行業(yè)應(yīng)用融合發(fā)展行動(dòng)計(jì)劃（2022-2026）》。同時(shí)，縱觀互聯(lián)網(wǎng)和金融行業(yè)現(xiàn)狀，騰訊發(fā)布QQ小窩、字節(jié)發(fā)布抖音小窩、阿里發(fā)布數(shù)字人生和未來(lái)城等元宇宙場(chǎng)景、京東百貨的3D虛擬廣告、金融領(lǐng)域摩根大通/證券銀行也不同程度發(fā)布了虛擬金融服務(wù)。

三、新交互技術(shù)落地探索- 金融APP營(yíng)銷(xiāo)場(chǎng)“虛擬數(shù)字人” 賦能世界杯主題營(yíng)銷(xiāo)

在金融科技領(lǐng)域，我們需要積極探索新的用戶交互和新的用戶體驗(yàn)。通過(guò)"金融元宇宙"進(jìn)一步突破傳統(tǒng)金融"時(shí)"和"空"的場(chǎng)景束縛，使客戶獲得科技感、沉浸感、補(bǔ)償感的體驗(yàn)同時(shí)，在金融拓客、觸點(diǎn)營(yíng)銷(xiāo)等業(yè)務(wù)模塊，通過(guò)技術(shù)創(chuàng)新挖掘新機(jī)遇、新競(jìng)爭(zhēng)力，開(kāi)辟業(yè)務(wù)增長(zhǎng)新賽道。本次借助世界杯這一熱點(diǎn)話題，通過(guò)數(shù)字人這一連接虛擬與現(xiàn)實(shí)的蟲(chóng)洞技術(shù)打造了全新的營(yíng)銷(xiāo)活動(dòng)體驗(yàn)。

1、京東金融虛擬數(shù)字人

1.1、虛擬數(shù)字人（數(shù)字人、虛擬人、虛擬形象）是指具有數(shù)字化外形的虛擬人物，與具備實(shí)體的機(jī)器人不同，虛擬數(shù)字人依賴顯示設(shè)備存在。虛擬數(shù)字人具備多重人類(lèi)特征：形象外貌特征，表達(dá)能力，感知交互能力。京東言犀數(shù)字人進(jìn)行了NLP、ASR、TTS、CG等多學(xué)科的深度融合，是多模態(tài) AIGC 及人機(jī)交互技術(shù)的結(jié)晶。

1.2、惟妙惟肖之身——多模態(tài)智能技術(shù)。她可以在視覺(jué)上帶來(lái)前所未有的新體驗(yàn)，通過(guò)語(yǔ)音、文字、表情、手勢(shì)、肢體等多模態(tài)，能夠一體化協(xié)同，這樣能讓數(shù)字人的擬真度更高，避免一些明顯的違和感。面容上在2D真人數(shù)字人方面，采用 GAN 深度學(xué)習(xí)算法，自研3DNeuralRender神經(jīng)渲染器，實(shí)現(xiàn)端到端的高保真面部合成，唇形與TTS完美匹配與音色無(wú)關(guān)，以流式方式實(shí)現(xiàn)多路實(shí)時(shí)合成與用戶進(jìn)行交互，訓(xùn)練數(shù)據(jù)壓縮到6分鐘內(nèi)，可以進(jìn)行大規(guī)模工業(yè)化生產(chǎn)。在肢體動(dòng)作研發(fā)了結(jié)合RIFE和Retiming的多幀多插入點(diǎn)的動(dòng)作生成過(guò)渡方案，實(shí)現(xiàn)2D數(shù)字人動(dòng)作的快速流暢過(guò)渡。在3D寫(xiě)實(shí)/卡通數(shù)字人方面，自研STA唇形實(shí)時(shí)驅(qū)動(dòng)技術(shù)，精細(xì)驅(qū)動(dòng)唇形動(dòng)作和面部表情，生成逼真的3D數(shù)字人動(dòng)畫(huà)和實(shí)時(shí)交互。動(dòng)作上，言犀研發(fā)的動(dòng)作合成方案，基于RIFE插幀多插入點(diǎn)的快速動(dòng)作過(guò)渡，可以讓數(shù)字人的動(dòng)作更加流暢自然；互動(dòng)中，2D及超寫(xiě)實(shí)、高精度3D數(shù)字人驅(qū)動(dòng)方案，可以實(shí)現(xiàn)音唇精準(zhǔn)同步，數(shù)字人說(shuō)話時(shí)，牙齒甚至牙縫都要精準(zhǔn)地對(duì)齊口型，這樣才不會(huì)看著別扭?？梢哉f(shuō)，惟妙惟肖的數(shù)字人需要多模態(tài)的綜合性技術(shù)能力。

1.3、善解人意之心——實(shí)時(shí)人機(jī)交互技術(shù)。數(shù)字人也不能只是“花瓶”，還要能夠與用戶實(shí)時(shí)互動(dòng)，做出合乎邏輯的反應(yīng)，這種數(shù)字人則更加稀少了，因?yàn)殡y度也高了一個(gè)數(shù)量級(jí)。首先，實(shí)時(shí)交互需要快速的動(dòng)作、表情渲染，對(duì)AI生成的速度和質(zhì)量要求非常高；其次，實(shí)時(shí)互動(dòng)意味著很多反應(yīng)不能事先生成，而要真正理解用戶的想法和需求，給出精準(zhǔn)的回答，這就要求數(shù)字人具備豐富且細(xì)粒度的知識(shí)突破、自然語(yǔ)言理解、情感計(jì)算等能力。比如在數(shù)字人直播場(chǎng)景，用戶想了解A商品和B商品的異同，需要數(shù)字人主播精準(zhǔn)地抓住顧客心理、比對(duì)信息、找到賣(mài)點(diǎn)，生成有吸引力的文案。為此，基于京東云言犀人工智能應(yīng)用平臺(tái)，在智能多模態(tài)對(duì)話與交互領(lǐng)域提出了理解準(zhǔn)確度、知識(shí)覆蓋度、交互流暢度、情感關(guān)懷度、任務(wù)完成度5維為標(biāo)準(zhǔn)的“新圖靈測(cè)試”體系，作為人機(jī)交互服務(wù)機(jī)器人的標(biāo)準(zhǔn)，也是數(shù)字人的核心能力。

2、用數(shù)字人提升交互體驗(yàn)，與用戶建立情感鏈接

作為負(fù)責(zé)金融APP的用戶產(chǎn)品研發(fā)團(tuán)隊(duì)，我們是最貼近用戶、了解用戶的，擁有最豐富的業(yè)務(wù)場(chǎng)景。針對(duì)以往我們負(fù)責(zé)的營(yíng)銷(xiāo)場(chǎng)域營(yíng)銷(xiāo)活動(dòng)來(lái)看，每次改變的都是活動(dòng)的玩法，以及頁(yè)面整體UI的改變，長(zhǎng)期以往來(lái)看，用戶對(duì)這類(lèi)型的營(yíng)銷(xiāo)活動(dòng)已經(jīng)產(chǎn)生了疲勞感，并不會(huì)因?yàn)橥娣ǖ母淖兘o用戶帶來(lái)整個(gè)活動(dòng)上交互體驗(yàn)的提升，所以我們需要去尋找新的交互方式來(lái)提升用戶的粘性以及體驗(yàn)。

起初我們確定了3大業(yè)務(wù)場(chǎng)景，計(jì)劃通過(guò)數(shù)字人來(lái)提升交互體驗(yàn)，和用戶建立更多的情感鏈接。分別為規(guī)則劇本介紹、情景關(guān)懷、業(yè)務(wù)增量場(chǎng)景。營(yíng)銷(xiāo)活動(dòng)的規(guī)則包括玩法介紹、獎(jiǎng)勵(lì)領(lǐng)取和使用等方面的規(guī)則介紹，通常較為復(fù)雜，本次又結(jié)合了世界杯的賽制，所以導(dǎo)致規(guī)則介紹內(nèi)容較多。鑒于用戶通常不會(huì)耐心去讀所有的活動(dòng)規(guī)則，也考慮到繁雜的文字內(nèi)容無(wú)法讓用戶高效的理解，因此通過(guò)數(shù)字人用語(yǔ)音講解的形式講述活動(dòng)規(guī)則，可以讓用戶更加直觀了解活動(dòng)內(nèi)容；同時(shí)通過(guò)場(chǎng)景的互動(dòng)形式，引導(dǎo)用戶選擇球隊(duì)，用戶球隊(duì)淘汰之后，通過(guò)一些鼓勵(lì)的話語(yǔ)激勵(lì)、安慰用戶，通過(guò)與數(shù)字人的互動(dòng)，增加沉浸式的陪伴、關(guān)懷并溫暖用戶，從而提高頁(yè)面留存，提高用戶停留時(shí)長(zhǎng)及參與率。

最終我們結(jié)合用戶、產(chǎn)品、業(yè)務(wù)多個(gè)視角，綜合評(píng)估最終的呈現(xiàn)效果及研發(fā)成本，決定以從未選擇球隊(duì)、選擇球隊(duì)被淘汰、開(kāi)獎(jiǎng)結(jié)果三個(gè)場(chǎng)景加入數(shù)字人交互，來(lái)貫穿整個(gè)世界杯營(yíng)銷(xiāo)活動(dòng)，既覆蓋了核心場(chǎng)景，又避免過(guò)度關(guān)懷造成對(duì)用戶打擾。同時(shí)我們的數(shù)字人選用了貼近“足球?qū)氊?/span>”的卡通形象，動(dòng)作設(shè)計(jì)方面也詮釋了“青春活潑可愛(ài)”的設(shè)定，并且讓數(shù)字人常駐在活動(dòng)頁(yè)面，增加世界杯的氛圍感，以及對(duì)用戶的陪伴。

3、活動(dòng)玩法以及場(chǎng)景介紹

本次營(yíng)銷(xiāo)活動(dòng)的主要玩法是用戶進(jìn)入頁(yè)面后會(huì)獲得一次免費(fèi)的搖號(hào)機(jī)會(huì)，通過(guò)搖號(hào)玩法可以獲得一個(gè)“抽獎(jiǎng)碼”，每天每個(gè)用戶最多可以獲得5個(gè)“抽獎(jiǎng)碼”，每天只有一次免費(fèi)搖號(hào)的機(jī)會(huì)，其余4次機(jī)會(huì)是用戶通過(guò)完成某項(xiàng)任務(wù)來(lái)獲得的。我們引入了世界杯熱點(diǎn)話題，通過(guò)猜球輸贏的形式來(lái)給自己的號(hào)碼池做一個(gè)翻倍的玩法。在猜對(duì)的同時(shí)除了能獲得我們自己的號(hào)碼池翻倍獎(jiǎng)勵(lì)外，還會(huì)獲得額外的積分或者京豆的獎(jiǎng)勵(lì)。通過(guò)已經(jīng)獲得的積分可以在我們營(yíng)銷(xiāo)活動(dòng)的其他樓層進(jìn)行一些權(quán)益的兌換和獲得。下面是我們整體系統(tǒng)架構(gòu)圖以及重點(diǎn)玩法流程圖。

我們相信營(yíng)銷(xiāo)活動(dòng)+熱點(diǎn)+數(shù)字人的組合方式一定會(huì)給用戶帶來(lái)一場(chǎng)不一樣的交互體驗(yàn)，下面我們主要通過(guò)三個(gè)不同的場(chǎng)景來(lái)介紹一下如何與數(shù)字人通信以及不同場(chǎng)景下數(shù)字人展現(xiàn)形式。

主動(dòng)喚起

1）當(dāng)用戶進(jìn)入活動(dòng)頁(yè)面，并且未選擇球隊(duì)時(shí)，會(huì)主動(dòng)喚起數(shù)字人提醒用戶進(jìn)行對(duì)支持球隊(duì)的選擇。

2）當(dāng)你選擇的球隊(duì)被淘汰時(shí)，用戶再次進(jìn)入頁(yè)面，也會(huì)主動(dòng)喚起數(shù)字人，引導(dǎo)用戶進(jìn)行球隊(duì)的重選。

被動(dòng)喚起

1）我們?cè)诨顒?dòng)頁(yè)面會(huì)常駐一個(gè)數(shù)字人的入口，當(dāng)用戶點(diǎn)擊入口時(shí)會(huì)進(jìn)入數(shù)字人交互界面。這時(shí)如果您選擇的球隊(duì)比賽未開(kāi)始或者勝負(fù)未分的情況下，數(shù)字人會(huì)有一些預(yù)設(shè)的交互動(dòng)作以及相應(yīng)的語(yǔ)音播報(bào)。但是當(dāng)您選擇的球隊(duì)已經(jīng)勝利，那數(shù)字人就會(huì)做出相應(yīng)的勝利邏輯。

4、帶來(lái)的預(yù)期效果

通過(guò)數(shù)字人與這次營(yíng)銷(xiāo)活動(dòng)的結(jié)合，我們發(fā)現(xiàn)數(shù)字人的引入不僅給用戶帶來(lái)了全新的體驗(yàn)，同時(shí)通過(guò)數(shù)字人技術(shù)引導(dǎo)用戶選擇球隊(duì)相比傳統(tǒng)引導(dǎo)方式的參與用戶數(shù)提升了30%。

四、未來(lái)展望

隨著互聯(lián)網(wǎng)發(fā)展和科技進(jìn)步，交互方式迎來(lái)了新的紀(jì)元。web3.0的時(shí)代帶來(lái)了交互體驗(yàn)的質(zhì)變，改變了交互對(duì)象和交互能力，傳統(tǒng)交互方式造成了人與真實(shí)世界的分裂，但是未來(lái)的交互方式，將會(huì)是能實(shí)現(xiàn)人、現(xiàn)實(shí)，虛擬之間的交互融合。未來(lái)，我們會(huì)繼續(xù)在虛擬形象、虛擬場(chǎng)景、虛擬服務(wù)相關(guān)的技術(shù)上繼續(xù)發(fā)力，在虛擬數(shù)字人、web3D、AI等相關(guān)尋找新的落地場(chǎng)景，跟隨著元宇宙體驗(yàn)從數(shù)字孿生、數(shù)字原生最后到達(dá)超現(xiàn)實(shí)的變革，做好金融業(yè)務(wù)的場(chǎng)景探索。

我們堅(jiān)信人與世界、人與傳感器會(huì)代替?zhèn)鹘y(tǒng)的交互方式，同時(shí)AR，VR，XR更會(huì)給人們的生活帶來(lái)近一步的用戶體驗(yàn)。隨著5G甚至6G等技術(shù)的發(fā)展，提升了信息傳遞的速度，讓信息傳輸變得無(wú)感知，通過(guò)以上的產(chǎn)物，在未來(lái)會(huì)徹底改變?nèi)祟?lèi)的生活、學(xué)習(xí)和娛樂(lè)的方式。

數(shù)字人的落地是我們?cè)谠钪娣矫娴囊淮喂δ苄試L試，現(xiàn)在的元宇宙生態(tài)尚未成熟，但是每一個(gè)技術(shù)點(diǎn)的突破和落地，都在完成京東金融的元宇宙拼圖。 我們也會(huì)在更多業(yè)務(wù)場(chǎng)景中，通過(guò)創(chuàng)新和新技術(shù)的運(yùn)用，持續(xù)為用戶帶來(lái)新的交互體驗(yàn)，用科技服務(wù)用戶。

? ? ? ? ? ? ? ? ? ? ? ? ? ?

版權(quán)聲明：本文內(nèi)容由互聯(lián)網(wǎng)用戶自發(fā)貢獻(xiàn)，該文觀點(diǎn)僅代表作者本人。本站僅提供信息存儲(chǔ)空間服務(wù)，不擁有所有權(quán)，不承擔(dān)相關(guān)法律責(zé)任。如發(fā)現(xiàn)本站有涉嫌抄襲侵權(quán)/違法違規(guī)的內(nèi)容， 請(qǐng)發(fā)送郵件至 sumchina520@foxmail.com 舉報(bào)，一經(jīng)查實(shí)，本站將立刻刪除。

加我微信: sumwb886 備注:?外包

免費(fèi)領(lǐng)推廣引流方案+100種賣(mài)貨方法