智东西(公众号:zhidxcom)
作者 | 徐珊
编辑 | 云鹏
智东西8月16日报(bao)道,今(jin)天魔(mo)珐(fa)(fa)科技在上海举办了超(chao)写实3D虚(xu)拟(ni)人新品发布会,并推(tui)出三款3D虚(xu)拟(ni)人终端产(chan)品:魔(mo)珐(fa)(fa)有言3D虚(xu)拟(ni)人视频AIGC平台、魔(mo)珐(fa)(fa)有光3D虚(xu)拟(ni)人直播AIGC平台以及(ji)魔(mo)珐(fa)(fa)有灵(ling)3D虚(xu)拟(ni)人服务AIGC平台。
此次发布会,由(you)魔珐科技虚拟(ni)人(ren)镜JING主持。据她(ta)介绍,自己是虚拟(ni)人(ren)3.0时代(dai)的(de)代(dai)表,虚拟(ni)人(ren)已经结束(shu)从(cong)(cong)0到1的(de)时代(dai),开始(shi)进入从(cong)(cong)“1到N”的(de)时代(dai)。

在(zai)会后,智东西和少数几家(jia)媒体与魔(mo)珐科技(ji)创(chuang)始⼈兼CEO柴⾦祥博(bo)⼠等多(duo)位专家(jia)深(shen)入对话,看到了(le)魔(mo)珐科技(ji)如何围绕AIGC时代下的3D虚拟(ni)人(ren),展开(kai)深(shen)入布局(ju),柴⾦祥认为如今企(qi)业已经(jing)可(ke)以从3D虚拟(ni)人(ren)时代获(huo)利,AIGC的终点就是3D虚拟(ni)人(ren)。
一、研究虚拟数字人超二十年,柴⾦祥提出3D虚拟人应有三大能力
魔珐科技(ji)创始⼈兼CEO柴⾦祥博⼠提到自己(ji)和3D虚拟(ni)人(ren)的(de)接触已(yi)经超过二十年,自己(ji)的(de)第一篇博士(shi)论文就是(shi)和虚拟(ni)人(ren)有关。
“我见证(zheng)了3D虚拟人(ren)从最(zui)初(chu)全球只有三四个(ge)(ge)团队研究(jiu),到现在越来(lai)越多的(de)人(ren)参与到3D虚拟人(ren)。”柴⾦祥博⼠提到从学(xue)术(shu)界来(lai)看,最(zui)初(chu)接触的(de)3D虚拟人(ren)都(dou)是(shi)人(ren)脸(lian)、面部(bu)形象(xiang)等局部(bu)的(de)研究(jiu),很(hen)少有团队兼顾整个(ge)(ge)3D虚拟人(ren)的(de)全面研究(jiu)。

目(mu)前行(xing)业内有关3D虚(xu)(xu)拟人(ren)(ren)的(de)定义较为多样,不同赛(sai)道(dao)的(de)玩(wan)家(jia)对3D虚(xu)(xu)拟人(ren)(ren)的(de)看法也各有侧重。而对普通用(yong)户而言,由于虚(xu)(xu)拟数(shu)字人(ren)(ren)常常在电(dian)影(ying)、游(you)戏等(deng)画面出现,这也是(shi)大部分(fen)普通用(yong)户对虚(xu)(xu)拟人(ren)(ren)的(de)第(di)一(yi)印象。
这时(shi)期,虚拟人几乎都是通(tong)过动作(zuo)捕捉,人们(men)“手(shou)工制作(zuo)”的。随着AIGC的时(shi)代来临,生成式内(nei)容形式多(duo)样(yang),从文(wen)字(zi)生成文(wen)字(zi)、文(wen)字(zi)生成图(tu)片(pian),再到(dao)文(wen)字(zi)生成视频(pin),但(dan)他提到(dao)在文(wen)字(zi)生成视频(pin)方面,很少有企业能(neng)(neng)够提供(gong)文(wen)字(zi)生成3D视频(pin)的能(neng)(neng)力。
柴⾦祥提到目前在文(wen)字生(sheng)成(cheng)二(er)维(wei)虚拟人方面,国(guo)内、国(guo)外均有不(bu)少(shao)玩家涌入,在文(wen)字生(sheng)成(cheng)二(er)维(wei)虚拟人过程中最重要的技术是唇(chun)部识别能力(li),但仅“复刻(ke)”人的嘴唇(chun),很难表达出人的表现(xian)力(li)。
柴(chai)⾦祥以(yi)人(ren)的形象(xiang)能力、虚(xu)拟(ni)人(ren)的制作方式(shi)为轴,画出一个四象(xiang)限图。他提到虚(xu)拟(ni)人(ren)要么有(you)内容,但是表现(xian)能力有(you)限,要么表现(xian)能力较(jiao)强,内容比较(jiao)单(dan)薄,且没办法大规(gui)模复(fu)制。

在他看来,真正3D虚拟人(ren)应该有高质(zhi)量、高效率、低门槛(jian)和规模化四大能(neng)力。
“三维(wei)虚拟人(ren)其(qi)实(shi)是人(ren)在(zai)虚拟人(ren)的‘镜像’,但是比人(ren)要更强大。”柴⾦祥说(shuo):“三维(wei)虚拟人(ren)其(qi)实(shi)是真人(ren)的最佳(jia)实(shi)践案(an)例(li),因为它(ta)可以24×7小时(shi),全天候在(zai)线,可以应用到各种终端,在(zai)各类触点可以发挥(hui)出其(qi)能力”。
二、如何打造3D虚拟人?三大能力成为关键
过(guo)去,“手工(gong)制作(zuo)”的3D虚拟(ni)人的方式缺乏AIGC能(neng)力、制作(zuo)成(cheng)本较高、制作(zuo)周(zhou)期较长,也比较难规模化。
而在AIGC时代,一些基于大(da)模型的(de)(de)智能(neng)助(zhu)手,没(mei)有3D虚拟人(ren)(ren)的(de)(de)精美外观,其AIGC的(de)(de)呈现效果比(bi)较有限。柴⾦祥认(ren)为(wei),AIGC时代,3D虚拟人(ren)(ren)的(de)(de)内容生产能(neng)力(li)将会是其最大(da)的(de)(de)难点。
回顾魔珐科(ke)技研发虚拟人历(li)程时,柴⾦祥(xiang)认为(wei)3D虚拟人一定要拥(yong)有较高的美术能力。
其(qi)次,他(ta)认为(wei)3D虚(xu)拟(ni)人的表达能力(li)要强。从5年(nian)前魔(mo)珐(fa)(fa)科(ke)技(ji)首次在ChinaJoy用AI表演动(dong)画(hua)展(zhan)示,到AI表演动(dong)画(hua)常(chang)态化动(dong)画(hua),再到现在魔(mo)珐(fa)(fa)科(ke)技(ji)实(shi)时通过文本直接生成3D动(dong)画(hua)或(huo)者语(yu)音,魔(mo)珐(fa)(fa)科(ke)技(ji)不断(duan)加强3D虚(xu)拟(ni)人的表达能力(li)。
最后,他提到大模(mo)型(xing)带(dai)来(lai)的AIGC的能力也将是虚拟人的关键。基于(yu)垂类(lei)大模(mo)型(xing),魔珐(fa)科技可以(yi)根据用户(hu)给出的关键词,自动生成用于(yu)直播场(chang)景的直播话术。

如今,魔珐科(ke)技基于AIGC声(sheng)音、AIGC文本(ben)生成(cheng)的能力,打造了3D虚(xu)拟(ni)人OS平台(tai)星(xing)云平台(tai)。他提(ti)(ti)到不同(tong)虚(xu)拟(ni)人的工业产线(xian),将会为虚(xu)拟(ni)人的制(zhi)造提(ti)(ti)供不同(tong)环节的虚(xu)拟(ni)资产,将虚(xu)拟(ni)人能力带入产业深处(chu)。
三、拿出三大消费级终端产品,魔珐科技推动数字人规模化
魔(mo)珐科技联合创始人谭宏冰详细(xi)介绍了魔(mo)珐有言3D虚(xu)拟(ni)人视频AIGC平台(tai)、魔(mo)珐有光3D虚(xu)拟(ni)人直(zhi)播AIGC平台(tai)、魔(mo)珐有灵3D虚(xu)拟(ni)人服务AIGC平台(tai)三大消(xiao)费级终端产品。
在3D虚拟人视频AIGC平(ping)台,魔珐有言会通过(guo)魔珐科技的AIGC三维动画和语音(yin)技术,只需(xu)要(yao)3步,选(xuan)(xuan)择(ze)虚拟人、选(xuan)(xuan)择(ze)场景(jing)以及一键(jian)生成,就可(ke)以一键(jian)生成各类主题虚拟人视频。

该平台生成的(de)视(shi)(shi)频可(ke)以(yi)应用于产品(pin)发布、公关播报(bao)、课程培训等各(ge)种场(chang)景,解决企业日常虚拟(ni)(ni)人视(shi)(shi)频制作难点。“在三(san)维(wei)场(chang)景内(nei),3D虚拟(ni)(ni)人的(de)视(shi)(shi)频也将(jiang)拥(yong)有空间变化。”谭(tan)宏冰重(zhong)点介绍了魔珐有言的(de)优势所在。
目前,魔珐(fa)有光(guang)3D虚拟人(ren)直(zhi)播AIGC平台(tai)拥有Lite和Pro两大版本,将会支持真人(ren)摄像头驱(qu)(qu)动、真人(ren)麦克风驱(qu)(qu)动、AI驱(qu)(qu)动三种不同的驱(qu)(qu)动模式(shi),满足不同应用场景的直(zhi)播需求。

“主播(bo)很(hen)难(nan)被标准化(hua),也(ye)很(hen)难(nan)管控(kong),是(shi)属(shu)于比较(jiao)难(nan)规模化(hua)的。”他提到在直播(bo)场(chang)景中,直播(bo)间虚(xu)拟(ni)后(hou)屏的展示也(ye)比较(jiao)丰富,可以更(geng)立体地展示产品(pin),虚(xu)拟(ni)人本身的语音(yin)效果(guo),产品(pin)表达更(geng)加多(duo)样(yang)。
谭宏冰认为在服(fu)务的黄金三角里,一(yi)对(dui)一(yi)、专业性和规模化将成为影响服(fu)务的关键因素。因此,魔(mo)珐有(you)灵3D虚拟人(ren)服(fu)务AIGC平台(tai),将会成为行业专家的最佳实践。
魔珐有灵将会为企(qi)业提供基(ji)于(yu)低门槛、垂直业务(wu)场景的(de)专属AI服务(wu)虚拟(ni)人,可应用于(yu)PC端(duan)、移动端(duan)、大(da)屏端(duan)或AR/VR。
“未来,无论是视频,还是直播和互动将(jiang)会有(you)一个虚拟人伴随在你的左右。”谭宏(hong)冰说道,“我们已经为3D互联网做好准备。”
四、规模化复制“金牌员工”能力,3D虚拟人提高产品转换率
每一个企业(ye)都在(zai)寻找更好的(de)连接方式,提(ti)(ti)高(gao)(gao)企业(ye)培训、提(ti)(ti)高(gao)(gao)产品的(de)转换率。魔珐(fa)科(ke)技市场(chang)负责⼈李韵提(ti)(ti)到在(zai)电商场(chang)景中,魔珐(fa)有言可以复制金牌(pai)员工(gong)的(de)讲解(jie)能力,为企业(ye)高(gao)(gao)效的(de)传达相关信(xin)息(xi),而(er)且,魔珐(fa)有言还(hai)能够高(gao)(gao)质量地生成相关视频(pin)、参与直播(bo)。

在(zai)PC端,企业官网可以成(cheng)为金(jin)牌产品(pin)体验官;在(zai)落(luo)地(di)页上(shang),可以成(cheng)为金(jin)牌产品(pin)推(tui)荐(jian)官。
在车企场景中,虚拟人可以(yi)在各个触(chu)点,“复制(zhi)”金牌(pai)员工的能力。同时,在全域(yu)多(duo)端,虚拟人将提高企业(ye)准(zhun)转换效率。

目前,3D虚拟人(ren)将在(zai)线上发(fa)布(bu)会、直播、3D云展厅、门店试(shi)驾、用(yong)车指(zhi)南(nan)、车机体验(yan)、APP和(he)视屏化运(yun)营等方(fang)面影响汽车行业关键触点体验(yan)。
五、对话魔珐科技CEO柴⾦祥:AIGC的终点是3D虚拟人
柴⾦祥认为(wei)3D虚(xu)拟人(ren)开(kai)始真正为(wei)企业获利。在交(jiao)互(hu)方面(mian),3D虚(xu)拟人(ren)的(de)交(jiao)互(hu)方式(shi)(shi)将会以语音和触屏为(wei)主,其交(jiao)互(hu)模式(shi)(shi)也(ye)将会随(sui)着多模态的(de)技术提供多样的(de)交(jiao)互(hu)能力。
“AIGC的(de)终点(dian),就是三(san)维虚(xu)拟人。”柴(chai)⾦祥谈(tan)到刚开(kai)始(shi)研(yan)究3D虚(xu)拟人其实是孤独(du)的(de),他提到明(ming)年魔珐科技奖开(kai)放更多的(de)接口,接入更多开(kai)发(fa)者,共同推动3D虚(xu)拟人发(fa)展(zhan)。

在过(guo)去一年半的(de)时(shi)间里(li),魔(mo)珐(fa)科(ke)技(ji)的(de)产(chan)品化开始(shi)加速,产(chan)品技(ji)术(shu)能力也随之加速前进,3D虚(xu)拟人(ren)迭代速度非常快。
他(ta)认(ren)为,目前深(shen)度学习的(de)(de)技术(shu)(shu)提升促进3D虚拟人来到技术(shu)(shu)拐(guai)点。另一方面(mian),场(chang)景的(de)(de)应用(yong)也在促进3D虚拟人应用(yong)。
在(zai)选择场(chang)景(jing)时,柴⾦祥(xiang)希望3D虚拟人的应用市(shi)场(chang)规模要大,能(neng)够直接获利(li),并且人的差异化将提供较高的企业价(jia)值,直播场(chang)景(jing)能(neng)够满(man)足这三点要求。据柴⾦祥(xiang)介绍,在(zai)抖(dou)音上,魔珐(fa)科技通过(guo)三维虚拟人,在(zai)2小时店铺的流量达到千万左右,在(zai)线人数达到千万人。
过去,魔珐科(ke)技已(yi)经积累(lei)不少项(xiang)目经验(yan),从而获得新的(de)产品服务。“我们(men)(men)现在(zai)找到(dao)了行业(ye)痛点,帮助企业(ye)提(ti)升转化率(lv)的(de)能(neng)力(li),通过AI能(neng)力(li)更好帮助企业(ye)服务。”如今他提(ti)到(dao)魔珐科(ke)技的(de)产品已(yi)经涉(she)及(ji)金融、教(jiao)育,近年来(lai)还会(hui)有(you)出(chu)海计划。“我们(men)(men)在(zai)产品的(de)商业(ye)化路线上,不分B端(duan)(duan)和C端(duan)(duan),核心技术会(hui)都(dou)是一样,但是商业(ye)模(mo)式会(hui)有(you)所不同。”柴⾦祥说(shuo)。
结语:3D虚拟人或成3D互联网时代的重要基础设施
此次会上,魔珐科技(ji)第一(yi)次较为全面、直观地展示其(qi)在3D虚拟人(ren)方向的布局(ju)和技(ji)术实力,也直接给出其(qi)对3D互(hu)联(lian)网(wang)时代(dai)的预想。
虚拟(ni)数(shu)字人自元宇宙热(re)度升温后(hou),一(yi)直(zhi)是处在热(re)议话题(ti)的(de)风(feng)口。但虚拟(ni)人将会如何盈利、如何为企业带(dai)来价(jia)值,也(ye)是过(guo)去两三年产业内玩家一(yi)直(zhi)寻(xun)找的(de)方向。
魔珐科(ke)技(ji)首次(ci)推出消费级虚拟数字人产(chan)品,或许(xu)将加速虚拟人规模化落地(di),距离(li)人人都能拥有自己(ji)的虚拟人时代更近一步。