前段时间,300多名来自全球各地的人工智能领域知名学者参加了第二届国际分布式人工智能学术会议(DAI 2020)。对于站在AI领域前沿的人来说,什么新奇的事情在他们眼里都已见怪不怪。
但是真当他们换上锦衣罗裳,走进宋代的殿宇参加AI学术盛会,难免会感慨,这一次的体验,的确有些新鲜和神奇。
这场神奇的线上会议发生在网易游戏《逆水寒》中,可以看到,宋朝风格的会场中坐满了参会者,但讨论的却是远在千年后的AI学术,仿佛是一场集体穿越。特别是当图灵奖得主、中国科学院外籍院士John E.Hopcroft教授身着汉服登场,但脱口而出的却是一串英文,这清奇的画风让人忍不住大呼:这会议绝了!
而唯一不会感到惊讶的,也许就是这场会议背后的设计者——
运用全球首创的沉浸式会议系统,网易伏羲将线下会议环节进行复刻,尽可能还原专业学术会议的全流程,将大会搬到了“云”上。这场沉浸式会议在本质上可以说是脱离了传统线上会议的范畴,单一的音视频会议在沉浸式的体验面前显得苍白无力。
作为国内首家专业游戏AI研究机构,网易伏羲基于大数据和云计算平台,触角遍及强化学习、图像动画、自然语言处理、用户画像、虚拟人等领域。在网易伏羲技术的赋能下,网易旗下多款游戏在提升游戏体验和降低研发成本等方面尝到了技术的甜头。
对于网易伏羲而言,这并不是游戏AI的上限,仍有更大的想象空间和价值,线上沉浸式会议系统就是他们在AI领域的新赛道之一。从其成立宗旨“创建人工智能与游戏交叉领域的世界一流实验室”这句话便可以看出,他们的星辰和大海在更远处。
游戏内:从捏脸到剧情生成,AI可以有颜又有内涵
说起近几年AI技术在游戏中的应用,智能捏脸当仁不让站在关注度的榜顶。尤其是在MMORPG领域,强大的捏脸系统似乎已经成了标配,作为游戏的初体验之一,捏脸环节就像是一个游戏的门面,决定了玩家对游戏的第一印象。每当一款MMO大作问世,必定会引发人们对于捏脸的讨论。
以最近开启终测的《天谕》手游为例,就将捏脸玩到了极致:除了基本的五官、发型、妆容,可以对各部分进行细节微调,其中仅眼睛部位,就提供了6个微调细节,甚至连头发的卷曲程度都可以更改,加上专业的自由轮盘,颜色可渐变、可纯色。不夸张地说,只要玩家能想到的脸蛋,都可以捏出来,因此一段时间内网上涌现了大量明星表情包素材,这些都是偶像粉丝玩家们在《天谕》手游上的作品。
要想撑起这样强大的智能捏脸系统,必须得有过硬的底层技术。在这方面,网易伏羲手里主要捏了两张牌:精确捕捉和可微处理。前者能够实现对人脸关键信息的精确捕捉;后者则能够建立起人脸与捏脸参数之间精确的数学模型——与传统的3D重建技术不同,网易伏羲与游戏方深入合作,通过智能捏脸功能返回的结果直接是游戏内角色参数而非3D模型,从而实现将人脸关键信息转化捏脸参数这一终极目标。
如果说专业表述太抽象,那用一组简单的数字来看,网易伏羲就智能捏脸技术已累计发表2篇顶会论文,申请了5项专利,其水准处于业内领先。其实只要观察网易旗下的几款MMORPG游戏就能发现,这些游戏的智能捏脸系统都很能打,如《逆水寒》、《天谕》等都以高度自由和细致入微的捏脸系统作为特色玩法,一次次刷新玩家的认知。
而AI带给人的惊喜不仅仅是视觉上的感知,在游戏内容的设计和剧情的走向上也带来了更多元的变化。这在恋爱手游《遇见逆水寒》八月初上线的新玩法“大宋傀儡戏”中,得到了最为直接的体现。顾名思义,在这个玩法里,AI就像傀儡,而玩家输入的言语则是操纵傀儡的机关线索,双方共同配合演出一幕戏剧。只需玩家输入简单的句子,AI就能自动识别并设定新剧情,通过对话或旁白的形式推动故事走向,直至达成最终目标。
这也是国内首个AI接入游戏中,与玩家共同创作剧本的玩法,出自网易伏羲自主研发的“有灵”AI。玩法背后的技术原理听起来很简单,即让自然语言处理(简称NLP)模型进行大量的语料训练以达到像真人的对话反馈结果;但难点在于要达到这样的效果,模型需要庞大的数据训练,包括海量中文小说的预训练、熟读《遇见逆水寒》的剧本,才能具备故事剧情的生成基础。
游戏外:
黑科技上线,助力创作者高质量产出
AI技术在不断成长的过程中,愈加与游戏形成互相交融、互相影响的趋势,不少AI技术的突破都离不开游戏的演练。在游戏的虚拟设定下,AI技术借助游戏平台的海量数据和仿真环境,通过算法上的持续演练和强化,逐渐具备更强的泛化能力,这意味着在游戏世界中通行的AI技术也将反哺现实世界,这也是当下游戏AI发展中需要纳入考虑的重要命题。
让我们用两种视角重新审视AI技术。在游戏中,有灵AI可以创造游戏剧情,如为《遇见逆水寒》这类的文字AVG游戏创造大量的文本来塑造角色形象,以及在女性向、乃至二次元游戏中帮助建立玩家与角色间的情感链接。而突破游戏范畴,向更广阔的领域延展,这项技术还展现出了智能与文创融合所爆发的潜力。
就在10月29日,网易伏羲设计开发的“亚运好声音-我为亚运写歌词”产品亮相第十四届(2020)杭州文化创意产业博览会杭州亚运主题馆。在屏幕上输入“杭州亚运”四个字,短短几秒,系统就自动生成了一首歌词,内容押韵且富有情感,如果不加说明,很难分辨出这是出自机器之手。AI写歌词的互动形式之外,是有灵创作平台将AI技术与内容创作领域相结合,旨在赋能内容创作者,助力原创内容产业的发展。可以窥见的是,网易伏羲的规划中,有灵创作平台承载的将会是开发AI辅助写剧本、写作文、写小说等功能,让每个人都能够以AI为笔,进行UGC创作。平台的这一想法和创新性似乎也得到了学术界的认可,关于平台技术论文已被世界NLP方向三大顶会之一EMNLP2020-demos收录。
虽然要达到臻于完美的AI文字内容创作还要假以时日,但在另一边,伏羲AI动画创作矩阵却已经有了站稳脚跟的“黑科技”——AI视频动捕技术。这项技术是伏羲团队耗时3年、基于海量数据和AI研发突破完成的,这项技术降低了动作制作的成本,提升了动作制作的效率和自由度。只需要通过普通摄像头或上传的视频文件,AI视频动捕技术就可以检测创作者的肢体动作,在游戏内虚拟人物上还原相同的动作,快速完成动画内容创作。
这项技术的问世是两类人群的福音。一是专业的动画制作团队:无需大量昂贵和笨重的硬件,便能大大提高动画制作的效率,加快制作周期并降低制作成本。二是游戏短视频制作人群,以及广大的玩家UGC群体:对于前者而言,这有助于游戏短视频营销产能的提升,让游戏热点营销日更不是梦;对于广大的同人内容创作者来说,这项技术将同人视频创作门槛降到最低,能够最大限度地进行内容创作。
显然,让有创作兴趣的普通大众都可以参与到同人创作中来,是伏羲团队打造AI动捕技术的主要原因之一。高质量且丰富的UGC内容是游戏社区繁荣的前提,因此要让动作表情捕捉走出制作难、硬件昂贵、环境复杂的困境,是释放创作者创作灵感与热情的第一步。为此,网易伏羲不遗余力推动玩家UGC的蓬勃发展,通过和“大宋映画”、“创幻科技”进行深度合作,为玩家和短视频内容赛道的创作者提供优质的UGC创作工具,给予用户超高自由度的自主编辑,让用户的创意不再受限于产能。“逆水寒·大宋映画首届电影节”的成功便是一个很好的证明,不仅引起玩家强烈反响,还涌现出不少精美的UGC作品,多个同人视频在抖音平台点赞数突破百万。
刚满三岁的网易伏羲近期频频进入大众视野,成为热议的对象,从幕后慢慢走向台前的过程中,可以感受到网易在研发技术上的日臻精进,以及技术应用范围的不断扩张。起源于为众多网易游戏产品提供高质量和前沿的AI技术应用,网易伏羲一方面让技术成为产品研发的稳固基石,另一方面运用人工智能尖端技术为玩家营造新世代的游戏体验,打开游戏想象的边界。
如今,伏羲团队正加速文娱板块的研究与应用,将来还会渗透更广阔的领域,在游戏与AI的探索结合中,进一步推动人工智能技术的发展。在网易伏羲,乃至网易看来,游戏AI的想象还有很高的上限,这条道路虽然充满未知,但或许会成为网易在游戏下半场持续发力的利器,以及探寻其他领域发展的突破口。