編輯導語：除去現實生活中的朋友家人，手機上的虛擬人似乎更加符合當代人的社交需求。本文將從移動端虛擬人的行業背景、實現技術、外形特徵、互動方式、使用場景等多個維度，為大家帶來詳細的移動端虛擬人產品分析，為大家入門虛擬人產品起到一定的參考借鑑意義，讓我們一起來看一下吧。
他們可能是伴你溫暖的朋友，貼心的小助手，亦或是平行時空的另一個你…
如果說元宇宙是一個充滿神秘與幻想，拉近使用者沉浸在由數字科技所幻化出的平行時空，那
虛擬人
，無疑是每個使用者進入元宇宙大門的門票。數字時代的未來將是元宇宙，這一點是沒有懸念的，但元宇宙本身的走向，卻充滿不確定性，人們的定義無法達成共識，有些事情總會發生，但是以怎樣的方式發生，沒人能給出確切的答案。
相比起部分廠商所期望營建的宏大元宇宙場景。
手機移動端
的發力，似乎顯得更接地氣，更加務實，產品型別也更加豐富和新穎。伴隨著一個個手機虛擬人產品的落地，連線兩個平行時空的大門，也正在被緩緩開啟。
一、行業背景：移動廠商紛紛進軍虛擬人賽道
據QuestMobile資料顯示，Z世代人群月均使用智慧手機的時間長達174。9小時。作為數字原生代，Z世代消費者展現了與前輩們截然不同的消費特徵。對於大多數Z世代來說，虛擬體驗已經是開啟新社交圈的方式和與同好互動的工具。經驗良好且有趣的
虛擬場景
已成為Z世代青睞的產品。
隨著先進技術的不斷突破，元宇宙概念正在興起。Z世代消費群體的崛起也為虛擬人帶來了良好的市場。得益於深度學習演算法的突破，近年來，虛擬偶像主播和虛擬助手等虛擬人物進入了公眾視野，由智慧驅動的虛擬人產業逐漸達到良好狀態。
基於目前移動網際網路時代的發展趨勢，未來國內外的移動廠商，不僅要隨時搶佔市場熱點，還要不斷鞏固自己的品牌文化個性和產品核心實力。他們不僅面向Z時代的年輕人，也不忽視前一代和下一代年輕人的感受，入局虛擬人這一領域則是必然的選擇。
二、虛擬人技術概覽
手機虛擬人作為虛擬人在移動端上的落地產品，其技術架構與常規虛擬人類似，其通用系統框架可分為
形象生成
、
形象驅動
、
形象渲染
以及
識別理解+分析決策
模組。
1。 形象生成
形象生成的過程即為建立數字資產的過程，通常由原畫師負責虛擬人的外觀設計，繪製出平面形象，再由3D建模師將原畫轉換為立體的模型，在建模的過程中，建模設計師的經驗顯得尤為重要，透過合理的疊加貼圖方式和精度取捨，可以讓虛擬人達到系統可以承載範圍內的最佳效果。接下來再透過骨骼繫結和PC渲染讓虛擬人可以像真人一樣“活”起來，營造有血有肉的飽滿視覺效果。
2。 形象驅動
形象驅動的種類較多，主要是為了讓虛擬人可以根據人的指令進行不同的動作和反應，完成與使用者之間的互動過程。常見的驅動形式包括：語音驅動、面部驅動、姿體驅動和手語驅動。
語音驅動
：基於音訊特徵控制面部（口型）驅動動畫；該過程主要包含音訊特徵提取、音素口型同步以及情緒表情對齊。
面部驅動
：基於攝像頭捕捉人臉特徵，驅動模型實時驅動；
透過在面部進行關鍵點的定義，利用攝像頭完成關鍵點的捕捉，最後根據追蹤實時資料生成對映動畫；
姿體驅動
：基於攝像頭捕捉姿體關鍵點資訊，驅動模型實現姿體控制；
在進行姿體驅動時，通常需要在關鍵位置處（如手指、關節）等位置佩戴專業追蹤裝置，進行骨骼繫結，最後透過實時同步的動作對映完成逼真的動作錄製。
手語驅動
：以《國家通用手語詞典》為標準，透過手語翻譯引擎和自然動作引擎，為虛擬人賦予手語翻譯和表達的能力，跨越資訊障礙，更好的服務於聽障人士。
根據是否需要實時動作捕捉，也可將虛擬人的驅動方式分為
AI驅動
和
真人驅動
兩大類。
AI驅動
：自動讀取並解析識別外界輸入資訊 ，智慧驅動虛擬人生成相應的語音與動作；
真人驅動
：透過動捕裝置或者攝像頭，實時捕捉面部表情和動作。
3。 形象渲染
渲染在電腦繪圖中是指用軟體從模型生成影象的過程。模型是用嚴格定義的語言或者資料結構對於三維物體的描述，它包括幾何、視點、紋理以及照明資訊。核心功能包括：物理系統、光影計算、圖形渲染。在手機端進行渲染的難點在於效能、功耗、記憶體之間的平衡與最佳化，以及儘可能地極致還原所設計的模型的真實感。
物理渲染所創造的人物及場景效果：
下圖左為重光照技術渲染，右為實際拍攝情況，兩者效果已幾乎無明顯差別：
4。 互動模組
互動模組是
識別理解
和
分析決策
模組的統稱。為擴充套件項，僅存在於互動型虛擬人當中。其核心功能主要有：
自然語言理解和生成
對話管理
語音技術
先透過語音識別模組將自然語言轉換成文字，隨後將文字處理成詞或句子向量，進入對話管理系統後，進行模型匹配和生成，把問句生成答句，再透過語音合成把文字轉換輸出給使用者。
三、固定IP VS 千人千面
需要指出的是，手機上的虛擬人產品受移動裝置的限制，難以落地高面數的虛擬人造型設計，尤其是在需要AI驅動或真人驅動的情況下，高面數的精緻造型容易引起消耗過多流量和頁面卡頓的問題。因此，虛擬人的造型選擇和實現方式主要可分為兩種，一種為“多面數固定IP+影片流推送”、另一種為“低面數千人千面捏臉+AI或真人驅動”。
固定IP
是指虛擬人的形象為一固定形象，通常外觀精緻，可以作為公司品牌代言的一部分，也可以出現在短影片或互動相對簡單甚至無互動的手機應用中；固定IP的呼叫方式通常為根據關鍵詞推送特定的短影片流或隨機播送短影片流；
千人千面
通常為使用者在數字世界的替身，使用者可以根據自己喜好自定義虛擬人的外形，進行捏臉和服裝匹配等，千人千面通常需要伴隨虛擬人動作庫的錄製以及相應數字資產的設計。數字資產通常指可以替換的虛擬人外觀特徵，如髮型、髮色、眼睛、臉型、服裝以及配飾等。千人千面的驅動方式主要為真人驅動，即虛擬人根據使用者的臉部表情和動作做出相應的對映，與使用者保持一致。
千人千面虛擬人的服裝道具庫：
千人千面虛擬人的動作庫：
四、虛擬人外形分類
按照虛擬人的外形特徵，可分為2D二次元、3D卡通、3D美型、超寫實、和模擬人六大類。
以上六類虛擬人的外形差異主要是由
精度
和
面數
所決定的，面數越高則精度越高也就越可以朝真人的外觀接近。面數越高需要佔用的資料量和空間也就更大，不同型別的虛擬人外觀適用於不同的平臺或終端。
面數
：是指三維建模中的立體形狀都是由最基本的三角形平面為單位構成的，一個單位為一面，面數越高，則建模的精度越高，圖形效果也更加精緻。
五、手機移動端使用場景
移動端使用場景通常是互動方式與驅動方式綜合影響的結果，根據有互動/無互動，真人驅動/AI驅動；移動端的使用場景可劃分為：語音助手、桌面互動桌布、電商直播、新聞播報、影片通話、影片會議、短影片、相機、相簿等。
接下來，本文將根據主要的使用場景分類，介紹目前較為有代表性的手機移動端虛擬人產品：
1。 語音助手
（1）OPPO 小布虛擬人（布美美）
推出時間
：2020。09。29
互動型別
：關鍵詞影片流推送、語音互動
外形
：固定IP+3D卡通
小布虛擬人是基於虛擬人多模態互動的手機智慧助手，涵蓋視覺、語音、自然語言處理等多模態融合演算法，依託小布助手的綜合AI能力，實現與使用者在多個場景生態下的內容服務、實時互動。目前的功能為AI新聞播報和天氣播報。未來將同步開放小布虛擬人定製平臺，未來能根據每個開發者的需求，演化出不同的個性化虛擬形象，如智慧客服、虛擬助手、帶貨主播等，可搭載在多個智慧終端裝置上，進一步推進OPPO在個人物聯網行業的發展。
（2）小米 小愛定製
推出時間
：2021。09。27 和civi手機一同釋出
互動型別
：關鍵詞影片流推送、語音互動
外形
：千人千面捏臉、3D卡通
小愛同學的升級版，使用者可以定製一個自己喜歡的小愛形象，再配合小愛現有的定製聲音及喚醒詞功能，輕鬆打造自己心目中的智慧助手。支援聲音定製，並將定製語音包分享給他人。專屬的AI Being。未來有望性格也能個性化定製，成為賽博世界裡最懂你的那個人。
（3）百度 度曉曉
推出時間
：2021。01。17
互動型別
：具備視覺識別和語音識別能力，包含AI驅動與影片流推送
外形
：固定IP、3D美型卡通
語音類虛擬養成助手，可以透過語音或文字輸入完成搜尋人物或天氣新聞播報，也可以進行換裝和房間佈置的養成類遊戲。度曉曉擁有二次元虛擬人物形象和獨特的情感互動系統，面對不同使用者的性格和愛好，度曉曉的理解和反饋也會有所差異。每個使用者的“度曉曉”都將自然產生不同的進化，擁有一個專屬於你的“度曉曉”。
（4）百度 龔俊數字人
推出時間
：2021。11。29
互動型別
：、關鍵詞影片流推送、語音識別
外形
：固定IP、模擬人
是國內首個可互動超寫實明星數字虛擬人，聚焦於實用功能，可滿足使用者在多場景下搜尋需求，例如使用者說出“今天天氣怎樣”，虛擬人即可快速識別並自動語音播報第一條搜尋結果。除了對搜尋結果進行播報外，還可對端功能進行控制，實現夜間模式、書架、遊戲等功能的一語直達。在外表呈現上，百度引入了4D掃描技術捕捉真人說話以及日常表情的面部細微變化，做到對龔俊真人的超寫實還原。
2。 桌面互動桌布
（1）黑鯊 鯊鯊醬
推出時間
：2021。03。23。 隨黑鯊遊戲手機4一同釋出
互動方式
：語音識別、觸控感知等
外形
：固定IP、3D動漫角色
平時可以作為動態桌面背景，在進行遊戲操作時，更能夠幫助使用者瞭解各類遊戲特性的使用方法，玩遊戲時可作為戰況播報員。造型精美，有一批忠實的遊戲粉絲，可以根據面板更換鯊鯊醬的外觀，定義鯊鯊醬的動作和聲音。充電時，鯊鯊醬也會一同充能，顯示精美動畫，此外，鯊鯊醬還擁有鬧鐘功能，以擬人的形式叫使用者起床。
（2）米哈遊 人工桌面（yoyo）
上線時間
：2020。12。01。
互動方式
：觸控感知
外形
：固定IP、3D美型動漫
yoyo是米哈遊開發的人工桌面裡一名固定IP角色。畫風細膩，桌面養成類遊戲，可以以動態桌面的形式居住在使用者的手機裡，並可根據使用者的觸控感知進行相應的反應，也可以根據不同的主題面板更換虛擬人的裝扮和居住空間，起到情感陪伴和心靈治癒的作用，感受專屬陪伴和沉浸式體驗的樂趣。
3。 影片通話
（1）OPPO Omoji
推出時間
：2021。9。 作為ColorOS 12新功能釋出
互動方式
：真人驅動，實時對映
外形
：千人千面 臉部定製 3D卡通
使用者可以根據自己的形象以及喜好捏出自己風味的 Omoji虛擬形象，其中膚色，髮型，帽子，眼鏡等包括五官都可以自己定義。設計後的形象可以接入影片會議，趣味拍照等活動中，面對突然會議，再也不用化妝，完美解決社恐問題。從技術的角度來看，透過引入了業內先進的Face Capture演算法，Omoji基於50個核心表情基打造出了高精度3D模型，令虛擬化栩栩如生。目前僅支援定義頭像，暫無下半身。
（2）蘋果 Memoji
推出時間
：2018。09。18 隨iOS 12正式版推出
互動方式
：真人驅動 實時對映
外形
：千人千面 上半身定製 3D卡通
該功能使用Apple的Face ID相機系統，以便將流行的表情符號對映到你的臉部，以便它們看起來像是在實時錄製中模仿你的面部表情。核心技術是透過結構光3D建模技術，實時捕捉使用者面部表情變化並作出實時對映，連吐舌等細緻變化都能檢測並同步。具有國際化並多樣性的素材可供使用者DIY自己的頭像和下半身（腰部以上）該功能與facetime和iMassage互聯，將能在影片通話和簡訊傳送上增添更多互動與樂趣。
4。 相機相簿
（1）三星 AR萌拍
推出時間
：2018。02。25 隨三星Galaxy S9一同釋出
互動方式
：全身動捕、面部驅動、實時對映
外形
：千人千面 全身定製 3D卡通
該功能位於三星手機自帶相機的AR體驗區，是一個簡單的一站式商店模式，讓使用者可以在一個地方使用其基於現實的全系列功能。使用者可以透過“動態萌拍相機”功能建立一個和自己很像的數字形象；再透過動態萌拍工作室建立自定義圖案的服裝；最後在動態萌拍貼紙功能中建立動態貼紙，可透過微信、彩信等方式傳送。還支援舞蹈錄製等有趣的創作方式。
（2）小米 Mimoji萌拍
推出時間
：2019。07。02
互動方式
：真人面捕、表情對映
外形
：千人千面 3D卡通
透過Mimoji萌拍，使用者可以根據自己的人臉進行建模，一鍵生成與自己類似的3D形象，如果對自動生成的樣式不滿意，可以進行修改編輯，包括髮型，臉型，眼睛，眉毛，鼻唇，鬍子，雀斑，眼鏡，配飾等等方面都可以進行調節。在相簿模組加入Mimoji以後，拍照錄像有了更多新玩法，使用者可以用虛擬的人物頭像錄製短影片，做成表情包分享到社交平臺或者發到微信朋友圈等。
5。 虛擬社交平臺
（1）崽崽 ZEPETO中文版
推出時間
：2018。12。下旬
互動方式
：按鍵操控、根據操控進行短影片流推送
外形
：千人千面全身定製 3D卡通
由韓國SNOW公司出品的一款以Z世代使用者為主的社交軟體，使用者進入軟體之後，第一步是進行捏臉。系統會先幫助使用者拍一張照片，生成一個大致相像的臉，然後使用者就可以在這個“基礎臉”之上進行任意的改動。捏臉之後，踐行著“我的美要讓全世界都看見”這一理念，使用者可以線上與其他使用者進行合影。崽崽的使用者裡既有臉型和服飾高階的時尚流，也有根據場景捏出最為合適造型的技術流，甚至透過崽崽在小紅書中進行口紅試色和服裝搭配。
（2）騰訊 超級QQ秀
推出時間
：2022。02。10。
互動方式
：多模態互動
外形
：千人千面 全身定製 3D卡通
QQ秀的升級版，完成了傳統QQ秀虛擬形象由2D靜態向3D動態的轉變。超級QQ秀裡不只服裝，還增加了對虛擬形象髮型、臉型、五官等細節的定製。另外，還有更加精緻的服飾，使用者可以更加完整的對形象進行打造。產品裡新加入了可以由使用者自行定製的小窩系統和可以走動聊天的室外場景，為QQ帶來了傳統線上社交模式所缺乏的臨場感覺。場景化讓超級QQ秀裡的社交有了更多想象的空間。
6。 電商直播
（1）阿里雲 淘寶智慧直播間
推出時間
：2020年夏
互動方式
：文字識別、多模態智慧互動
外形
：千人千面捏臉定製
阿里雲推出的一款由智慧技術驅動一個虛擬形象在前臺進行自動化開播、個性化推薦的一款智慧產品。當商家付費開通後，可以透過捏臉選擇不同服裝，加定品牌logo服裝，選擇合適的聲音和口音，一鍵化生成指令碼等24*7小時使用品牌智慧直播間，實現無人開播。虛擬人會自動挑選並識別買家的留言做出正確的解答，並在其中穿插關鍵詞特效，如買一送一、最低折扣等吸引買家眼球。
以上，便是小編對移動端虛擬人產品，從技術側到應用側的探討與總結，希望能對虛擬人產品感興趣的朋友提供幫助和指引。
參考資料
：
QuestMobile2020 “Z世代”洞察報告
搜狐：中國z世代虛擬數字人感受：開啟新社交圈的方式和可能
CNbeta 百度釋出養成類虛擬助手“度曉曉”：開啟搜尋創新玩法
搜狐：百度APP上線“龔俊數字人”：可語音互動並提供搜尋服務
搜狐：ColorOS 12 Omoji功能體驗：定製獨屬於自己的虛擬形象
IT之家：蘋果升級Animoji，推出Memoji：能模仿到舌頭
三星官網：Galaxy Z Flip的AR區提供哪些功能？
新浪網：小米CC9 為東方人專屬的髮型和造型
介面新聞：崽崽，你還在玩ZEPETO？
APP found：崽崽zepeto中文版介紹
21世紀經濟報道：騰訊推出超級QQ秀，引領線上虛擬社交新時代
新浪創世記：超級QQ秀背後：騰訊關於線上虛擬社交新時代的思考
阿里雲：品牌智慧直播間
作者：Chuanxi
本文由 @Chuanxi 原創釋出於人人都是產品經理，未經作者許可，禁止轉載。
題圖來自 Unsplash，基於CC0協議。
