CN / EN

与栩栩如生的数字人类进行感同身受的虚拟互动

Source:
2022 May. 20
By Giacinto Bottone

短信到视频通话,虚拟通信已经牢牢地嵌入到大多数社交互动中。事实上,对许多人来说,现在几乎无法想象没有手机的日子是怎么过的。这一点在当前COVID-19环境中尤为明显,我们大多数人在日常生活中完全依赖这些传播。


然而,在用虚拟交流代替面对面交流的过程中,会丢失很多东西。Didimo是一家总部位于葡萄牙的初创企业,它的目标是将丰富的人际交流带给每一个在线互动。


Didimo的首席执行官和创始人Veronica Orvalho在《创新起源》上解释了她公司背后的动机。


“我清楚地看到,我们彼此联系的方式正在演变,但有一样东西缺失了。我怎样才能以一种更感性的方式虚拟地连接?因为我真的相信发送短信通常会引起很多误解。所以,这是关于建立一种新技术,让我们可以通过数字设备在更人性化的层面上交流。”


这就是为什么Didimo发明了一种软件,可以让用户在他们的虚拟交流中拥有逼真的数字版本的自己。这为他们提供了整合人类联系和交流核心的人类属性的机会:视觉外观和动画、行为、情感和声音。


例如,一个Didimo化身可以阅读你的电子邮件并传递正确的情绪,否则这些情绪可能会丢失在文本中。


技术


Didimo已经有了一个可供公司使用的应用程序编程接口(API)。首席执行官表示,开发人员利用这项技术将逼真的数字人(Didimos)集成到他们自己的应用程序中。


但是,它是如何工作的呢?这些Didimos与现实生活中的Didimos有多少相似之处呢?


现有的技术是利用图片来重现使用者的形象。人们可以拍一张自拍或上传几张照片,这样就可以获得更深入的信息,他们的Didimo将基于这些数据创建。提供的信息越多,Didimo对用户的描述就越好。


Didimo的业务发展总监Matt Vernon-Clinch解释说,这项技术将对等互动带回了许多不同的媒介。


“我们把人们的照片数据输入管道,显然有很多方式可以输入这些数据。但从我们的过程是一个优化的三维实时清洁拓扑网格实时钻机,它准备好了动画。”他补充说,这种管道包括人们说话时典型的嘴型和面部表情。


运动捕捉更新的方式


他补充说,这种自动化过程产生的是被称为3D资产的东西,它可以被应用到终端用户拥有的多种产品或服务中。


“这是一个非常可扩展的产品;人们可能想要小规模的字符生成。但我们也在考虑非常大规模的平台使用,我们可以成为别人平台的一部分。”


尽管该API是谷歌的核心产品,但在GooglePlay上也有一款应用。在这个平台上,用户可以创建自己的Didimo,让他们通过文本到语音的技术说话。一项新的更新即将发布,其中将包括动作捕捉。这使得用户可以很容易地重新创造运动,这就把技术放到了任何人的手中,而这是迄今为止人们还负担不起的。


前往那里


Orvalho在角色和空间动画方面有超过15年的经验,主要在游戏和电影行业。那时,Didimo技术刚开始被开发。


Orvalho一直对研究和学术感兴趣,并考虑到角色创造过程是多么耗时和昂贵,她在某个时候问自己如何能自动化这个过程。


怀着这个目标,她建立了一个拥有大约20名研究人员和工程师的实验室。


尽管她主要关注******行业,但她知道的下一件事是,她被邀请参与欧盟医疗保健领域的项目。她将她的动画技术应用到体现认知的研究中,研究如何提高与家庭暴力受害者打交道时的同理心水平,帮助身体残疾的人恢复大脑中受损的区域,帮助自闭症儿童提高他们的沟通能力。


她多年的研究给她留下了大量的技术,可以自动化3D字符和在它们上面绘制表情。然而,Orvalho说,直到2010年这个平台进入市场,她才以完全不同的眼光看待她的研究。


“有一个自闭症儿童来尝试我们的测试应用程序,他的父亲问他是否可以带上这个平台。我问为什么是为了他而不是为了他的儿子。他说他想利用这个平台和儿子交流。”


“突然之间,我第一次感到,我们的发展可以影响其他人。因为我一直在想,这项技术是如何被用来改善交流的。”


挑战


创造这项技术的主要挑战之一是Orvalho多年来一直在研究的:如何避免恐怖谷。


机器人技术中的“恐怖谷”概念最早是由日本的森正弘提出的,他认为人们会排斥外形像人但又不能完全模仿真人的机器人。


Didimo成功地穿越了恐怖谷,这对这项技术的成功至关重要。


下一个挑战是对Didimos的运动应用。然而,这项技术已经被开发出来并可以使用,但是还没有大规模推广。


尽管如此,Orvalho期望在未来人们将使用Didimo作为他们的接口,以一种更人性化和更具同情心的方式与他人联系。此外,她希望她的公司和技术能为不同文化背景下的孩子们接受教育和交流的方式做出贡献。



青瞳视觉编译(如版权问题,请及时联系青瞳进行删除,给您带来的不便请谅解)

Contact us

CHINGMU is here to support your motion capture journey. We are happy to help you find the solution you need.

Contact our experts immediately