记者 敖煜华 徐晟哲 文
记者 步恩撒 王毅 摄
在第三届全球数字贸易博览会(下称“数贸会”)上,数智文娱项目成了“最靓的仔”,不少展位前都排起了长长的队伍,大家都迫不及待要体验数智时代的新型娱乐方式。
高效的光学动捕技术
一位动作捕捉(以下简称“动捕”)演员身贴反光标记点,潇洒挥舞着金箍棒,他身后的显示屏上,随着演员的走动、跑跳、进攻,悟空在虚拟世界中做出了同样的动作——抬手眺望、抓耳挠腮,活脱脱就是一场《黑神话:悟空》(下称《悟空》)的现场大秀。
在几乎零延迟的动态呈现背后,是来自高科技的赋能。“我们将12个摄像头、41个标记点,分别贴在演员身体各处,经过短短几秒的人体校准,摄像头就能准确识别标记点,演员就可以开始为悟空设计动作了。”展位上的工作人员介绍说。
作为国内首款3A游戏大作,《悟空》在制作时对动捕技术要求极为严苛,这些动捕技术为玩家呈现了大片级的逼真场景、人物形象及动作刻画。无论是基本的走、跑、跳、攻击、防御,还是复杂的攀爬、游泳等,都呈现出极高的真实感和流畅度。
据介绍,如果使用传统的动画制作技术,一个动画师工作一整天,最多只能制作出15秒的视频,如果利用光学动捕技术,演员表演几分钟就能同步生成几分钟的动作数据。
将现实“扫”进虚拟
一只硅胶兔子的半身像,被放在杭企思看科技的展台上,工作人员手里拿着一个透出青色光芒的仪器,对着“兔子”上下左右一通扫描,它的“孪生兄弟”立即就出现在旁边的电脑屏幕中了,两只兔子几乎一模一样……这台将现实物体“扫”进虚拟空间的仪器叫ireal 3D三维扫描仪。
“三维扫描仪中间有一个激光发射器,两端各有一个相机,它可以捕捉发射到物体上被反射回的激光,从而进行三维建模,这其实和人眼成像的原理很类似。三维建模的功能有很多,目前最为人熟知的就是为电子游戏建模,让游戏中的场景、人物、物品更接近现实。还可应用到文物复刻、机械制造、医疗等广阔领域。”思看科技工作人员边擦拭着硅胶兔子边介绍,“因为越是平整的物品,扫描的相似度就越高,如果物体表面凹凸不平,就会让激光难以反射,从而造成扫描误差。”
虚拟音乐家弹出天籁之音
展馆中,一台无人演奏的钢琴吸引了记者的目光。只要在钢琴旁的电脑里输入乐谱,黑白琴键就自主跳动,一曲曲动听的音乐随即流淌而出,吸引了不少观众即兴合唱。
这是浙江音乐学院(以下简称“浙音”)和雅马哈乐器音响中国公司共同研发的跨界钢琴智能音乐伴奏系统,将数字音乐与实物音乐巧妙结合了起来。浙音师生还带来了符号音乐生成大模型、原创数字音乐、数字音乐交易平台等多件展品。
来到旁边的“中国传统音乐与乐器虚拟博物馆”,戴上AR设备,对着其中虚拟建模的万家坝型铜鼓、冷水冲型铜鼓、虎座鸟架鼓等中国传统乐器,挥一挥手,鼓点就会响起。
数贸会现场,浙音还带来了沉浸式声影交互展作品《光影丹青》,仙鹤飘然飞过观众头顶,层峦叠嶂的山峰纷纷掠过眼前,观众仿佛进入画中的世界。
据介绍,这是通过VR引擎驱动空间投影技术,同时采用全新的空间音频智能处理技术和视、听、触多感官实时交互装置,让中国历代绘画在声、光、影中“活起来”。