原文作者：平臺研發(fā)部，智能服務(wù)與產(chǎn)品部

距離加文·伍德提出web3.0已經(jīng)過去8年時間，這8年加文·伍德創(chuàng)建的以太坊大放異彩，同時由web3.0引出的數(shù)字人、元宇宙也生根發(fā)芽，茁壯成長，帶來了非凡的用戶體驗(yàn)。

在互聯(lián)網(wǎng)產(chǎn)業(yè)都在尋求打造元宇宙新生態(tài)系統(tǒng)的背景下，數(shù)字人擔(dān)任著信息制造、傳遞的責(zé)任，是連接虛實(shí)世界、增進(jìn)用戶體驗(yàn)必不可少的一部分，是元宇宙“人-物-場”鏈接的新介質(zhì)。京東金融APP為了給用戶提供更好的用戶體驗(yàn)，在產(chǎn)品、價格、服務(wù)三個緯度上，不斷追尋最佳的業(yè)務(wù)表達(dá)和信息傳遞方式，在數(shù)字人應(yīng)用方面大膽嘗試并取得了初步的成果。

一、用戶體驗(yàn)需求——從傳統(tǒng)的圖文展示、上下滑動到個性化交互

截至2021年我國互聯(lián)網(wǎng)滲透率已達(dá)73%，在互聯(lián)網(wǎng)人數(shù)增長和人均上網(wǎng)時長增長上已趨于穩(wěn)定。通過對Z世代用戶體驗(yàn)需求進(jìn)行調(diào)研和分析，Z世代用戶有自己的文化圈層、圈層語言、特征喜好，他們的行為愛好有著鮮明的特色，他們不再局限于視角、聽覺的網(wǎng)絡(luò)傳播互動，而是追求更近一步的產(chǎn)品體驗(yàn)，他們有著對體驗(yàn)升級的需求，行業(yè)內(nèi)急需一個新的突破點(diǎn)來滿足其需求。

諾貝爾物理學(xué)獎獲得者喬治·斯穆特曾說過：“虛擬現(xiàn)實(shí)的未來不在于構(gòu)建魔術(shù)般的幻境，而是為現(xiàn)實(shí)生活帶來積極改變?！被ヂ?lián)網(wǎng)時代的交互體驗(yàn)主要是2D信息的表達(dá)，而在最近十年我們正擁有了創(chuàng)建3D世界的技術(shù)，未來當(dāng)我們可以在虛擬世界中無比真實(shí)地感覺到空間和時間，我們有望接近4D的階段，即虛擬與現(xiàn)實(shí)共生，而我們認(rèn)為這有可能是交互體驗(yàn)最終的階段。

作為國內(nèi)金融科技行業(yè)的TOP應(yīng)用，京東金融APP必須要滿足未來用戶的偏好，嘗試滿足Z世代的產(chǎn)品形態(tài)，是我們用戶體驗(yàn)提升的一部分。在對互聯(lián)網(wǎng)行業(yè)和集團(tuán)內(nèi)的技術(shù)能力進(jìn)行洞察后，我們在多個技術(shù)方向上進(jìn)行了大膽的嘗試，其中數(shù)字人就是其中高價值的一環(huán)。數(shù)字人等相關(guān)技術(shù)將幫助我們構(gòu)建平行的社會，打破已經(jīng)持續(xù)已久的人機(jī)交互體驗(yàn)瓶頸，由人機(jī)交互過渡到人人交互。要具備真實(shí)意義的社交體驗(yàn)就需要有感情連接，要讓人有歸屬感才能支撐其基礎(chǔ)的社會宇宙社交方式，不能只是傳統(tǒng)的文字、語音、視頻的形式，更多的是個性化交互的需求升級。

二、保持技術(shù)前瞻性- 洞察行業(yè)和政策發(fā)展趨勢

縱觀各行業(yè)發(fā)展史，每個階段的突破都是在數(shù)量積累到一定的極限后引起質(zhì)變的?；ヂ?lián)網(wǎng)交互形態(tài)演進(jìn)也遵循這樣的發(fā)展規(guī)律，由web1.0到Web3.0每個階段都是一個由量到質(zhì)的突破。

靜態(tài)互聯(lián)網(wǎng)時代的交互體驗(yàn)，在Web1.0時代，也就是PC互聯(lián)網(wǎng)時代，是一個群雄并起，逐鹿網(wǎng)絡(luò)的時代。用戶利用web瀏覽器通過門戶網(wǎng)站，單向獲取內(nèi)容，主要進(jìn)行瀏覽、搜索等操作。用戶只是被動接受內(nèi)容，單純的人機(jī)通信，沒有互動體驗(yàn)；移動互聯(lián)網(wǎng)時代的交互體驗(yàn)，在Web2.0時代，用戶不再只是內(nèi)容接收方，可以在線閱讀、點(diǎn)評、制造內(nèi)容，成為內(nèi)容的提供方，還可以與其他用戶進(jìn)行交流溝通，提供服務(wù)的網(wǎng)絡(luò)平臺成為中心和主導(dǎo)，聚集起海量網(wǎng)絡(luò)數(shù)據(jù)； 大互聯(lián)時代的交互體驗(yàn)，在Web3.0時代，典型特點(diǎn)是多對多交互，不僅包括人與人，還包括人機(jī)交互以及多個終端的交互，一開始僅僅是大互聯(lián)時代的初期，真正的Web3.0時代一定是基于物聯(lián)網(wǎng)、大數(shù)據(jù)和云計(jì)算的智能生活時代，實(shí)現(xiàn)了“每個個體、時刻聯(lián)網(wǎng)、各取所需、實(shí)時互動”的狀態(tài)，也是一個“以人為本”的互聯(lián)網(wǎng)思維指引下的新商業(yè)文明時代。

Web3.0是一場體驗(yàn)變革，也讓互聯(lián)網(wǎng)更加智能化、人性化。通過3D圖形、AR/VR/XR、可穿戴設(shè)備、人機(jī)接口等技術(shù)的應(yīng)用，為用戶帶來前所未有的交互感、參與感。它讓“元宇宙”從概念逐漸走向現(xiàn)實(shí)，基于上述技術(shù)，再疊加邊緣計(jì)算、5G、云計(jì)算、AI等新一代信息技術(shù)，讓打造“全息互聯(lián)網(wǎng)”成為可能，虛擬世界與現(xiàn)實(shí)世界的距離被拉近、邊界變得模糊，個人體驗(yàn)也從感知實(shí)體世界向虛擬世界延展。在元宇宙的通用架構(gòu)圖中也可以看到，虛擬形象（數(shù)字人）是元宇宙的技術(shù)核心。

在宏觀政策方面，國家大力支持數(shù)字經(jīng)濟(jì)，近一年北京元宇宙商標(biāo)注冊量位列第一，其次是廣州、深圳、上海；另外，11月1日五部委聯(lián)合發(fā)布《虛擬現(xiàn)實(shí)與行業(yè)應(yīng)用融合發(fā)展行動計(jì)劃（2022-2026）》。同時，縱觀互聯(lián)網(wǎng)和金融行業(yè)現(xiàn)狀，騰訊發(fā)布QQ小窩、字節(jié)發(fā)布抖音小窩、阿里發(fā)布數(shù)字人生和未來城等元宇宙場景、京東百貨的3D虛擬廣告、金融領(lǐng)域摩根大通/證券銀行也不同程度發(fā)布了虛擬金融服務(wù)。

三、新交互技術(shù)落地探索- 金融APP營銷場“虛擬數(shù)字人” 賦能世界杯主題營銷

在金融科技領(lǐng)域，我們需要積極探索新的用戶交互和新的用戶體驗(yàn)。通過"金融元宇宙"進(jìn)一步突破傳統(tǒng)金融"時"和"空"的場景束縛，使客戶獲得科技感、沉浸感、補(bǔ)償感的體驗(yàn)同時，在金融拓客、觸點(diǎn)營銷等業(yè)務(wù)模塊，通過技術(shù)創(chuàng)新挖掘新機(jī)遇、新競爭力，開辟業(yè)務(wù)增長新賽道。本次借助世界杯這一熱點(diǎn)話題，通過數(shù)字人這一連接虛擬與現(xiàn)實(shí)的蟲洞技術(shù)打造了全新的營銷活動體驗(yàn)。

1、京東金融虛擬數(shù)字人

1.1、虛擬數(shù)字人（數(shù)字人、虛擬人、虛擬形象）是指具有數(shù)字化外形的虛擬人物，與具備實(shí)體的機(jī)器人不同，虛擬數(shù)字人依賴顯示設(shè)備存在。虛擬數(shù)字人具備多重人類特征：形象外貌特征，表達(dá)能力，感知交互能力。京東言犀數(shù)字人進(jìn)行了NLP、ASR、TTS、CG等多學(xué)科的深度融合，是多模態(tài) AIGC 及人機(jī)交互技術(shù)的結(jié)晶。

1.2、惟妙惟肖之身——多模態(tài)智能技術(shù)。她可以在視覺上帶來前所未有的新體驗(yàn)，通過語音、文字、表情、手勢、肢體等多模態(tài)，能夠一體化協(xié)同，這樣能讓數(shù)字人的擬真度更高，避免一些明顯的違和感。面容上在2D真人數(shù)字人方面，采用 GAN 深度學(xué)習(xí)算法，自研3DNeuralRender神經(jīng)渲染器，實(shí)現(xiàn)端到端的高保真面部合成，唇形與TTS完美匹配與音色無關(guān)，以流式方式實(shí)現(xiàn)多路實(shí)時合成與用戶進(jìn)行交互，訓(xùn)練數(shù)據(jù)壓縮到6分鐘內(nèi)，可以進(jìn)行大規(guī)模工業(yè)化生產(chǎn)。在肢體動作研發(fā)了結(jié)合RIFE和Retiming的多幀多插入點(diǎn)的動作生成過渡方案，實(shí)現(xiàn)2D數(shù)字人動作的快速流暢過渡。在3D寫實(shí)/卡通數(shù)字人方面，自研STA唇形實(shí)時驅(qū)動技術(shù)，精細(xì)驅(qū)動唇形動作和面部表情，生成逼真的3D數(shù)字人動畫和實(shí)時交互。動作上，言犀研發(fā)的動作合成方案，基于RIFE插幀多插入點(diǎn)的快速動作過渡，可以讓數(shù)字人的動作更加流暢自然；互動中，2D及超寫實(shí)、高精度3D數(shù)字人驅(qū)動方案，可以實(shí)現(xiàn)音唇精準(zhǔn)同步，數(shù)字人說話時，牙齒甚至牙縫都要精準(zhǔn)地對齊口型，這樣才不會看著別扭?？梢哉f，惟妙惟肖的數(shù)字人需要多模態(tài)的綜合性技術(shù)能力。

1.3、善解人意之心——實(shí)時人機(jī)交互技術(shù)。數(shù)字人也不能只是“花瓶”，還要能夠與用戶實(shí)時互動，做出合乎邏輯的反應(yīng)，這種數(shù)字人則更加稀少了，因?yàn)殡y度也高了一個數(shù)量級。首先，實(shí)時交互需要快速的動作、表情渲染，對AI生成的速度和質(zhì)量要求非常高；其次，實(shí)時互動意味著很多反應(yīng)不能事先生成，而要真正理解用戶的想法和需求，給出精準(zhǔn)的回答，這就要求數(shù)字人具備豐富且細(xì)粒度的知識突破、自然語言理解、情感計(jì)算等能力。比如在數(shù)字人直播場景，用戶想了解A商品和B商品的異同，需要數(shù)字人主播精準(zhǔn)地抓住顧客心理、比對信息、找到賣點(diǎn)，生成有吸引力的文案。為此，基于京東云言犀人工智能應(yīng)用平臺，在智能多模態(tài)對話與交互領(lǐng)域提出了理解準(zhǔn)確度、知識覆蓋度、交互流暢度、情感關(guān)懷度、任務(wù)完成度5維為標(biāo)準(zhǔn)的“新圖靈測試”體系，作為人機(jī)交互服務(wù)機(jī)器人的標(biāo)準(zhǔn)，也是數(shù)字人的核心能力。

2、用數(shù)字人提升交互體驗(yàn)，與用戶建立情感鏈接

作為負(fù)責(zé)金融APP的用戶產(chǎn)品研發(fā)團(tuán)隊(duì)，我們是最貼近用戶、了解用戶的，擁有最豐富的業(yè)務(wù)場景。針對以往我們負(fù)責(zé)的營銷場域營銷活動來看，每次改變的都是活動的玩法，以及頁面整體UI的改變，長期以往來看，用戶對這類型的營銷活動已經(jīng)產(chǎn)生了疲勞感，并不會因?yàn)橥娣ǖ母淖兘o用戶帶來整個活動上交互體驗(yàn)的提升，所以我們需要去尋找新的交互方式來提升用戶的粘性以及體驗(yàn)。

起初我們確定了3大業(yè)務(wù)場景，計(jì)劃通過數(shù)字人來提升交互體驗(yàn)，和用戶建立更多的情感鏈接。分別為規(guī)則劇本介紹、情景關(guān)懷、業(yè)務(wù)增量場景。營銷活動的規(guī)則包括玩法介紹、獎勵領(lǐng)取和使用等方面的規(guī)則介紹，通常較為復(fù)雜，本次又結(jié)合了世界杯的賽制，所以導(dǎo)致規(guī)則介紹內(nèi)容較多。鑒于用戶通常不會耐心去讀所有的活動規(guī)則，也考慮到繁雜的文字內(nèi)容無法讓用戶高效的理解，因此通過數(shù)字人用語音講解的形式講述活動規(guī)則，可以讓用戶更加直觀了解活動內(nèi)容；同時通過場景的互動形式，引導(dǎo)用戶選擇球隊(duì)，用戶球隊(duì)淘汰之后，通過一些鼓勵的話語激勵、安慰用戶，通過與數(shù)字人的互動，增加沉浸式的陪伴、關(guān)懷并溫暖用戶，從而提高頁面留存，提高用戶停留時長及參與率。

最終我們結(jié)合用戶、產(chǎn)品、業(yè)務(wù)多個視角，綜合評估最終的呈現(xiàn)效果及研發(fā)成本，決定以從未選擇球隊(duì)、選擇球隊(duì)被淘汰、開獎結(jié)果三個場景加入數(shù)字人交互，來貫穿整個世界杯營銷活動，既覆蓋了核心場景，又避免過度關(guān)懷造成對用戶打擾。同時我們的數(shù)字人選用了貼近“足球?qū)氊?/span>”的卡通形象，動作設(shè)計(jì)方面也詮釋了“青春活潑可愛”的設(shè)定，并且讓數(shù)字人常駐在活動頁面，增加世界杯的氛圍感，以及對用戶的陪伴。

3、活動玩法以及場景介紹

本次營銷活動的主要玩法是用戶進(jìn)入頁面后會獲得一次免費(fèi)的搖號機(jī)會，通過搖號玩法可以獲得一個“抽獎碼”，每天每個用戶最多可以獲得5個“抽獎碼”，每天只有一次免費(fèi)搖號的機(jī)會，其余4次機(jī)會是用戶通過完成某項(xiàng)任務(wù)來獲得的。我們引入了世界杯熱點(diǎn)話題，通過猜球輸贏的形式來給自己的號碼池做一個翻倍的玩法。在猜對的同時除了能獲得我們自己的號碼池翻倍獎勵外，還會獲得額外的積分或者京豆的獎勵。通過已經(jīng)獲得的積分可以在我們營銷活動的其他樓層進(jìn)行一些權(quán)益的兌換和獲得。下面是我們整體系統(tǒng)架構(gòu)圖以及重點(diǎn)玩法流程圖。

我們相信營銷活動+熱點(diǎn)+數(shù)字人的組合方式一定會給用戶帶來一場不一樣的交互體驗(yàn)，下面我們主要通過三個不同的場景來介紹一下如何與數(shù)字人通信以及不同場景下數(shù)字人展現(xiàn)形式。

主動喚起

1）當(dāng)用戶進(jìn)入活動頁面，并且未選擇球隊(duì)時，會主動喚起數(shù)字人提醒用戶進(jìn)行對支持球隊(duì)的選擇。

2）當(dāng)你選擇的球隊(duì)被淘汰時，用戶再次進(jìn)入頁面，也會主動喚起數(shù)字人，引導(dǎo)用戶進(jìn)行球隊(duì)的重選。

被動喚起

1）我們在活動頁面會常駐一個數(shù)字人的入口，當(dāng)用戶點(diǎn)擊入口時會進(jìn)入數(shù)字人交互界面。這時如果您選擇的球隊(duì)比賽未開始或者勝負(fù)未分的情況下，數(shù)字人會有一些預(yù)設(shè)的交互動作以及相應(yīng)的語音播報。但是當(dāng)您選擇的球隊(duì)已經(jīng)勝利，那數(shù)字人就會做出相應(yīng)的勝利邏輯。

4、帶來的預(yù)期效果

通過數(shù)字人與這次營銷活動的結(jié)合，我們發(fā)現(xiàn)數(shù)字人的引入不僅給用戶帶來了全新的體驗(yàn)，同時通過數(shù)字人技術(shù)引導(dǎo)用戶選擇球隊(duì)相比傳統(tǒng)引導(dǎo)方式的參與用戶數(shù)提升了30%。

四、未來展望

隨著互聯(lián)網(wǎng)發(fā)展和科技進(jìn)步，交互方式迎來了新的紀(jì)元。web3.0的時代帶來了交互體驗(yàn)的質(zhì)變，改變了交互對象和交互能力，傳統(tǒng)交互方式造成了人與真實(shí)世界的分裂，但是未來的交互方式，將會是能實(shí)現(xiàn)人、現(xiàn)實(shí)，虛擬之間的交互融合。未來，我們會繼續(xù)在虛擬形象、虛擬場景、虛擬服務(wù)相關(guān)的技術(shù)上繼續(xù)發(fā)力，在虛擬數(shù)字人、web3D、AI等相關(guān)尋找新的落地場景，跟隨著元宇宙體驗(yàn)從數(shù)字孿生、數(shù)字原生最后到達(dá)超現(xiàn)實(shí)的變革，做好金融業(yè)務(wù)的場景探索。

我們堅(jiān)信人與世界、人與傳感器會代替?zhèn)鹘y(tǒng)的交互方式，同時AR，VR，XR更會給人們的生活帶來近一步的用戶體驗(yàn)。隨著5G甚至6G等技術(shù)的發(fā)展，提升了信息傳遞的速度，讓信息傳輸變得無感知，通過以上的產(chǎn)物，在未來會徹底改變?nèi)祟惖纳睢W(xué)習(xí)和娛樂的方式。

數(shù)字人的落地是我們在元宇宙方面的一次功能性嘗試，現(xiàn)在的元宇宙生態(tài)尚未成熟，但是每一個技術(shù)點(diǎn)的突破和落地，都在完成京東金融的元宇宙拼圖。 我們也會在更多業(yè)務(wù)場景中，通過創(chuàng)新和新技術(shù)的運(yùn)用，持續(xù)為用戶帶來新的交互體驗(yàn)，用科技服務(wù)用戶。

? ? ? ? ? ? ? ? ? ? ? ? ? ?

版權(quán)聲明：本文內(nèi)容由互聯(lián)網(wǎng)用戶自發(fā)貢獻(xiàn)，該文觀點(diǎn)僅代表作者本人。本站僅提供信息存儲空間服務(wù)，不擁有所有權(quán)，不承擔(dān)相關(guān)法律責(zé)任。如發(fā)現(xiàn)本站有涉嫌抄襲侵權(quán)/違法違規(guī)的內(nèi)容， 請發(fā)送郵件至 sumchina520@foxmail.com 舉報，一經(jīng)查實(shí)，本站將立刻刪除。

加我微信: sumwb886 備注:?外包

免費(fèi)領(lǐng)推廣引流方案+100種賣貨方法