敦煌研究院与腾讯互娱联手 打造数字藏经洞和虚拟人伽瑶!
日前,由敦煌研究院和腾讯联手打造的“数字敦煌文化遗产数字创意技术联合实验室”(以下简称“技术实验室”)宣布成立。
发布会上,技术实验室宣布启动首批合作项目“数字藏经洞和敦煌莫高窟官方虚拟人伽瑶”的相关工作。技术实验室将结合敦煌研究院的文物数字化技术和腾讯互娱的游戏技术在线上构建一个全真的数字藏经洞,以互动体验的方式和大众一同分享藏经洞出土文物背后的鲜活历史。此外,技术实验室还将打造敦煌莫高窟官方虚拟人伽瑶,开展虚拟人实时直播、讲解等具体实践,为弘扬敦煌文化探索创新演绎方式。双方签订了五年战略合作协议,未来将基于技术实验室,利用腾讯互娱的游戏技术,共同在文化遗产的数字化保护、跨界联动打造文创IP产品、开展数字文保与互联网科技人才交流等领域展开持续而深入的合作交流。
“依托数字敦煌的学术与资源优势,和腾讯互娱的技术与传播优势,双方共建技术实验室,一道致力于探索研究适用于文化遗产价值展示传播的新技术、新模式,共同设计开发符合时代需求、满足社会文化需求的数字文化传播创意作品,开拓敦煌文化艺术弘扬传播的新范式、新业态,共同为中华优秀传统文化的传承创新作出积极贡献。”敦煌研究院院长苏伯民说。
“因为历史原因,人们没有办法在真实物理世界中重建藏经洞,但这一切可以在数字世界里重生。”腾讯集团市场与公关部总经理李航说,“我们以游戏引擎为底层技术,计划应用数字孪生技术,和敦煌研究院共同努力把藏经洞1∶1复制再生。我们相信这会是一个全新的数字文化内容产品,期待它能够打破现有的文博展陈方式,借助云游戏服务器的平台实现多端无门槛进入,我们相信这会成为全球敦煌爱好者进入敦煌的重要窗口。”
为了让更多公众能一览部分藏经洞出土文物真貌、深度感受它们背后的生动故事,技术实验室通过激光扫描、照片重建技术,结合游戏引擎的PCG技术(程序化内容生成技术)、PBR技术(基于物理的渲染技术),以毫米级精度1∶1还原藏经洞壁画、文物细节,并模拟不同时间里敦煌莫高窟的光照、植被等情况,在线上构建一个全真的数字藏经洞,实现物理场景的数字化高保真复现,再现当年藏经洞万卷藏书的盛况。
此外,双方还将根据藏经洞出土文物所记载的历史内容,创造搭建数字互动的文化场景,重现文物背后的历史时空情景,逐步构建出藏经洞的“数字文化世界”。
其中,即将走进大众视野的第一件文物就是国家一级文物“敦研001《归义军衙府酒破历》”。透过它,大众可以深入了解北宋时期敦煌的经济、文化、历法、民俗等社会面貌以及藏经洞从洞窟开凿、室藏万卷到惊现于世、文物流散的前世今生。
“我们会用游戏化的表述方法让文物背后的故事更生动地表达出来,用户可以透过指间身临其境地体验。我觉得讲故事要做到两点,第一是唯美,第二是有趣,这样用户在接受的过程中就会更加轻松一些,这也是让文物活起来的特别方式。”腾讯互娱研发效能部副总经理邓大付说。在此基础上,数字藏经洞还生动还原了众多“历史人物”,让大众在观览中与不同时期的人物“对话互动”,沉浸式体验“穿越”历史。数字藏经洞是技术实验室的首批重点项目之一。未来,数字藏经洞将有望成为打开敦煌文物世界的重要窗口,通过这个科技窗口,人们可以跨越时间和空间的桎梏,深度感受藏经洞文物的丰富细节,感受敦煌文化的浩瀚之美。
开场仪式中,虚拟人物伽瑶作为嘉宾主持,表演了一段优美的敦煌舞。伴随着复原古乐风韵的原创音乐,伽瑶舞出演奏式、反弹琵琶式、吹笛式等专业敦煌舞动作,飘然灵动。
双方打造的敦煌莫高窟官方虚拟人伽瑶,其原型来自敦煌莫高窟壁画中声音婉转如歌的神鸟“迦陵频伽”,服装纹饰及配色等设计灵感来自《都督夫人礼佛图》中的供养人和莫高窟第217窟《观无量寿经变》中的菩萨。
伽瑶的形象着重体现古典气韵,模型、材质、布料暗纹甚至是毛发鬓角等细节都经过了精细打磨。基于游戏引擎的实时驱动技术管线,结合动作捕捉、全实时驱动加渲染、真实毛发与实时布料解算、面部驱动底层算法优化等多领域技术,现在的伽瑶,不仅能实时做出表情,连头发、衣服、配饰都能像现实中一样随风而动。
“伽瑶可以应用到更多的场景中,可以担任莫高窟讲解员,或者在某个线下体验展上直接跟用户沟通,而且这个沟通其实并不是借助于AI的技术,背后会有一个实时动捕的演变。”腾讯内容生态部副总经理刘智鹏说。未来,伽瑶将作为首位数字敦煌文化大使,以展览虚拟直播、丝路文化科普、IP创新跨界合作等方式与大众见面,带来更丰富的文化内容互动。
同时,基于“云游敦煌”小程序构建的敦煌文化知识图谱,结合AI技术,伽瑶还将智能学习和掌握丰富的敦煌文化知识,成为云游敦煌的首位数字讲解员,随时随地跟线上游客交流敦煌文化知识,带领更多人领略敦煌文化的魅力。