网易伏羲首席游戏AI技术专家陶建容：AI赋能游戏创造价值

来源：好游戏攻略时间：2024-11-28 01:39

杭州网讯 12月18日-20日，2020网易未来大会在杭州盛大举行。大会以“洞觉未见”为主题，汇聚了全球最强大脑，期盼以远见超越未见，去寻找打开未来的钥匙。

大会上，网易伏羲首席游戏AI技术专家陶建容博士做了《人工智能点亮游戏未来》主题演讲。

游戏行业在AI浪潮下，正发生着巨大的变革。充满复杂性和趣味性的游戏，对AI来说不仅是非常理想的实验环境，也可以说是最丰富的人机交互形式之一。

陶建容表示，游戏正在驱动AI几乎所有核心领域的发展，包括强化学习、图形图像、自然语言、用户感知、信号处理等等。

具体而言，随着游戏越来越普及，数量越来越多，功能越来越复杂，在游戏生命周期的全链路，行业都希望借助技术来提高自身效率、改善玩家体验，包括策划、动作、美术、音频、程序、测试、营销、运营等等环节。

作为网易伏羲的使命之一，如何用人工智能技术去点亮游戏的未来？陶建容分享了网易伏羲的解决方案。

陶建容表示，AI可以帮助设计出更加智能的NPC，通过强化学习技术训练更加强大、更加像人、难度可控，甚至风格多样的AI机器人。设想一下，如果有一只AI宠物根据语音指令去执行一系列复杂的操作，一定会别有一番乐趣。实际上，《倩女幽魂》手游已经首创发布了AI智能小孩，重新定义了游戏对话体验。这些AI智能小孩人设不同，多才多艺，可以实现和玩家多轮对话，还能进行自我升级和创造。

陶建容还介绍了网易伏羲在AI智能形象创建方面的落地成果。在《逆水寒》中，玩家只需上传一张自己的靓照，AI模型就会自动生成捏脸系统所需要的参数，渲染之后，就可以在游戏中创建出一个和用户非常神似的虚拟角色。

此外，AI也在大幅提升游戏生产效率。例如，在美术环节，让模型自然动起来需要非常高的技术门槛，让角色完成一套约30秒钟的动作，可能需要2个多小时的设计时间。陶建容表示，通过AI自动蒙皮算法，只需要3分钟，可以节省97%的美术时间，让美术投入更多时间到创意和创作中去。

目前，网易伏羲经过三年多的探索，已经发表了70多篇游戏和AI顶会论文，申请了100多篇游戏和AI相关的技术专利。同时，网易伏羲的相关研究也落地服务了100多个游戏客户，每天AI服务调用量超过1亿次。

以下为陶建容博士演讲的部分内容：

大家好，我是来自网易伏羲的陶建容，很荣幸来到未来大会和大家分享人工智能点亮游戏未来。

我是一个游戏热爱者，同时也很幸运成为了游戏领域的AI研究者。纵观游戏和AI的发展史，它们之间有着非常天然的相辅相成的关系，在游戏中得到的远不止快乐，游戏还可以给AI研究提供非常理想的实验环境。AI作为人类最有用的发明之一，我们也是见证了它在各行各业所取得的成功。在AI浪潮下，游戏行业也正发生着巨大的变革。

游戏的复杂性和趣味性让它成为对AI来说非常理想的实验环境。从计算复杂度的角度来看，很多游戏都是NP-hard的问题。而且游戏吸引人的地方，也在于说人们为了完成它们所需要付出的努力和技巧。游戏也可以说是最丰富的人机交互形式之一，目前可以使用的，和游戏进行交互的方式已经不再局限于传统的键盘、鼠标、触摸屏，那对游戏的控制器而言，我们还可以使用像心率变化之类生理机能，像身体姿态、手势之类的身体动作。包括语音文本，甚至脑机接口等等。

2019年，游戏在全世界范围内产生了大概1200亿美元的总收入。随着越来越多的玩家加入，游戏所需要的内容也就越来越多。在游戏中，玩家和机器共同设计和创造出了非常多的内容，同时也产生了大量玩家体验和行为的数据。

同时，游戏也在驱动AI几乎所有核心领域的发展，包括强化学习、图形图像、自然语言、用户感知、信号处理等等。以围棋为例，围绕它的研究已经有了几十年，一直持续到了最近几年AlphaGo的成功。AlphaGo就是用深度学习和蒙特卡洛树搜索相结合的方式，击败了两名最优秀的围棋职业选手，而且在《Nature》《Science》上都发表了论文。

游戏还是AI实现长远目标的最佳载体。现在如火如荼的自动驾驶公司也开始用游戏作为载体，因为在现实的场景中获得数据非常困难，也有很多风险。游戏天然形成了封闭式训练环境，可以非常便捷地获得数据，从而进行更加高效的训练。

网易伏羲就是由这样一群热爱游戏，同时也非常喜欢人工智能技术的同学组建起来的。经过三年多的探索，我们发表了70多篇游戏和AI顶会论文，也申请了100多篇游戏和AI相关的技术专利。同时，我们也把研究落地服务了100多个游戏客户，每天AI服务调用量超过1亿次。

作为伏羲的使命之一，我们如何用人工智能技术去点亮游戏未来？随着游戏越来越普及，数量越来越多，功能越来越复杂，在游戏生命周期的全链路，大家都渴望着借助技术来提高自身效率，和改善玩家体验，包括策划、动作、美术、音频、程序、测试、营销、运营等环节。网易伏羲的初心，就是希望可以用AI技术提升游戏生命周期每一个环节的效率，同时为游戏玩家带来更革命性和创新性的体验。

游戏策划是我们虚拟世界的架构设计师，AI可以帮助他们设计出更加智能的NPC。我们也是通过强化学习的技术训练了更加强大、更加像人、难度可控，甚至风格多样的AI机器人。除了训练出更强大的AI机器人，我们还训练出了更擅长配合，更擅长协作的AI机器人，帮助游戏玩家获得更加好的体验。当大家玩游戏的时候，是不是经常会有一种想要喊出来的冲动，我们可以设想一下，如果有一只AI宠物根据你的语音指令去执行一系列复杂的操作，我想当兄弟们在一起开黑时，一定会别有一番乐趣。在《倩女幽魂》手游中，我们也是首创发布了AI智能小孩，重新定义了游戏对话的新体验。这些小孩有着不同的人设，而且多才多艺，可以实现和玩家多轮对话，而且还可以不断和玩家对话中进行自我升级和创造。

除了AI小孩带给玩家温暖、欢乐，我们还有AI智能老师，可以帮助玩家学习成长。我们的游戏策划其实还在剧情文案创作中投入了非常多的精力，我们也是基于GPT-2 ，通过学习海量的语料库，打造出了文案创作助手。甚至可以让玩家自己在游戏中和机器人对话创作出更加精彩的剧情，我们也是在《遇见逆水寒》上线国内第一个AI文字游戏玩法，获得了玩家一致好评。

我相信很多人已经在展厅体验了我们的AI自动捏脸，这也是国内首创的AI玩法。在《逆水寒》中产生了非常大的反响，你只需要上传一张自己的靓照，我们的AI模型就会自动生成捏脸系统所需要的参数，经过渲染之后就可以在游戏中创建出一个和你非常神似的虚拟角色。

除了智能形象创建之外，我们通过AI生成技术，帮助美术在游戏中生成大量的游戏时装、道具、庄园等，同时采用风格迁移技术实时对游戏画面进行风格调整，满足不同玩家对不同游戏风格的需求。在美术环节，我们让模型自然动起来需要非常高的技术门槛，让角色完成一套约30秒钟的动作，可能需要2个多小时的设计时间。通过AI自动蒙皮算法，我们只需要3分钟的时间，可以节省97%的美术时间，可以让美术投入更多时间到创意和创作。

同时，为了让游戏世界更加真实，我们需要更高动作自由度的NPC。在《逆水寒》中，我们通过语音生成动作、语音生成表情的AI技术，大大提高游戏剧情动作制作的效率。这里面的NPC的表情、肢体动作都是通过我们输入一段语音，通过神经网络自动生成。

我们还打造了一组表情迁移和动作迁移的技术。仅仅通过普通的摄像头或者上传一段视频，就可以完成表情和动作的捕捉。而这个技术，也大大降低游戏剧情动作制作的成本。我们还在想，人工智能自己能否生成动作，甚至让它自己随着音乐翩翩起舞。所以我们也做了尝试，这里面的人工智能跳的舞蹈都没有任何人为编排，全都是人工智能听了音乐之后即兴跳出来，它可以跳任何曲风、任何风格，比如你给它现代歌曲就可以跳街舞风格，如果给古典歌曲就会跳古典舞蹈。这首歌大家非常熟悉，刚刚李乐已经介绍过了，背后有AI创作人，它具备了作词、编曲、演唱在内所有的AI生成技术能力，从创作到演唱到生成歌曲，仅仅需要一个小时的时间。

当GPT-3推出来的时候，我觉得这是对程序员来说非常大的福音，因为我们日常有非常多的数据库查询的编程工作。通过自动代码生成的技术，我们只需要用语言描述代码的需求，就可以自动生成编程所需要的SQL语句。

游戏匹配系统和游戏推荐系统是游戏非常重要的内容，玄天引擎和谛听引擎也可以更加精准刻画我们的用户画像，去认知玩家的能力和感知玩家的需求，并且基于强化学习和组合优化AI技术，制定最优匹配和推荐策略，为游戏玩家提供更好的对战、社交和成长性体验。

测试是游戏中非常重要的一环，是游戏安全和品质最终保障。传统的测试流程主要是依靠人测试或者写脚本测试，日常工作量非常大，重复性劳动很多，覆盖率不是很足。我们也推出了AI自动测试服务，用算力来解放人力，用强化学习的技术增加测试的深度，用进化算法增加测试的广度，实现更低成本、更高覆盖率测试，为测试环节节约大量人力、物力和财力。

在游戏运营环节，猖狂的外挂现象给游戏玩家和游戏方带去非常多的困扰。及时发现并且打击外挂现象，成为游戏不得不面对的难题。我们推出的伏魔引擎，首次提出用人工智能技术来检测游戏中的外挂，打击非正常的游戏现象，为玩家创造更加绿色、健康的游戏环境。除此之外，我们推出的风言舆情，可以让运营团队更加实时感知游戏的舆情动态。

在营销环节，网易伏羲有灵智能创作平台提供了非常创新的动画和短视频制作工具，用户只需要通过简单的音频输入，基于语音生成动作、语音生成表情的技术，就可以快速生成符合人设的短视频或者动画片段。视频中角色的面部表情和它的肢体动作，也是我们通过AI算法自动生成的。

我们通过语音合成和语音识别技术，让我们的《倩女幽魂》手游的女医师给现实的游戏玩家打电话进行互动。

游戏也正在非常积极地与AI技术做融合，做很多过去做不到的事情。例如，在《逆水寒》中，我们也举办了第一个在虚拟世界里面的国际学术顶级会议。我们可以想象一下300多个全球AI专家穿着北宋服装，在游戏里面开会、做学术讲座，甚至在展厅做讨论。作为一个研究员来说，我觉得这件事情非常刺激，也非常有现实感。

刚刚，我已经介绍了非常多的AI赋能网易游戏全链路的落地实践；当然，我们也正在把AI技术赋能给整个游戏行业，为企业用户创作更多价值。

很多年前，我读《奇点临近》这本书的时候，看到书中有这样的预言：在21世纪的20年代，全沉浸虚拟现实，将是一个引人入胜的环境和体验的巨大乐园。其实我们现在已经处在21世纪20年代。到21世纪20年代末，我们将难以把虚拟与现实区分开，并且它们将涉及所有的感知以及与我们情绪相关的神经系统。当我们进入21世纪30年代的时候，人和机器之间将没有明显的区别；真实与虚拟现实之间，将没有明显的区别；工作和生活、游戏之间，将没有明显的区别。所以现实世界和虚拟世界的边界越来越模糊，未来不管是现实虚拟化还是虚拟现实化，我们相信AI技术一定会和AR/VR、脑机接口等技术一起，共同创造游戏和生活美好的未来！

谢谢大家！

2020网易未来大会由杭州市人民政府和网易公司联合主办，杭州市商务局、杭州市经济和信息化局、杭州市滨江区人民政府、北京网易传媒有限公司以及网易（杭州）网络有限公司承办，中国移动总冠名。大会将进行三天的头脑风暴、涵盖了预见未来、新基建、人工智能、区块链、潮商业、UP生活以及和文化等论坛。