游戏AI Bot的拟人化和风格化：AIGA赋能游戏探索.pdf

1、游戏游戏AIAI BotBot的拟人化和风格化的拟人化和风格化：AIGAAIGA赋能游戏探索赋能游戏探索人机协作 万物有灵 2023/06/18胡裕靖主要内容主要内容大纲从从AIGCAIGC到到AIGAAIGA游戏游戏AI BotAI Bot拟人化和风格化研究进展拟人化和风格化研究进展RLHFRLHF微调游戏微调游戏AI BotAI Bot模型模型1从从AIGCAIGC到到AIGAAIGAAIGCAIGC时代时代AIGCAIGCAIGC：AI Generated ContentAI Generated Content对话对话代码代码办公文档办公文档图片图片AIGCAIGC时代时代AIGC对于游

2、戏三维模型（三维模型（From From 网易瑶台）网易瑶台）AIGCAIGC于游戏：于游戏：原画，服装，人脸，表情，三维模型，对话，关卡，剧情，道具，数值，美术资源（美术资源（FromFrom 网易丹青约网易丹青约）AIGCAIGC时代时代AIGC对于游戏NPCNPC开放式对话（开放式对话（From From 逆水寒手游）逆水寒手游）文字捏脸（文字捏脸（From From 逆水寒手游）逆水寒手游）AIGCAIGC于游戏：于游戏：原画，服装，人脸，表情，三维模型，对话，关卡，剧情，道具，数值，AIGCAIGC时代时代AIGC对于游戏关卡生成关卡生成武器生成（武器生成（From Galactic

3、 Arm Race GameFrom Galactic Arm Race Game）AIGCAIGC于游戏：于游戏：原画，服装，人脸，表情，三维模型，对话，关卡，剧情，道具，数值，场景建筑生成场景建筑生成http:/ AIGCAIGC时代时代AIGAAIGAAIGA？AI Generated ActionAI Generated ActionGame AI BotGame AI Bot暗黑破坏神：雇佣兵控制暗黑破坏神：雇佣兵控制全明星街篮派对全明星街篮派对FIFA&FIFA&实况：队友控制实况：队友控制永劫无间永劫无间逆水寒逆水寒老头环：老头环：BossBoss控制控制AIGCAIGC时代时代

4、AIGA网易伏羲的网易伏羲的AIGAAIGA2游戏游戏AI AI BotBot拟人化、风格化拟人化、风格化拟人化拟人化AIAI、风格化、风格化AIAI研究价值和现状极大影响玩家游戏体验和心流，但还没有形成方法论极大影响玩家游戏体验和心流，但还没有形成方法论通过通过Reward ShapingReward Shaping做到拟人化行为做到拟人化行为拟人化：让游戏中的AI Bot具有玩家行为特征，去机器人化（多）风格化：生成行为风格丰富多样的游戏AI Bot但调但调RewardReward的过程耗时耗力的过程耗时耗力22%35%53%0%15%30%45%60%DistanceHP Diff.59

5、%100%79%0%25%50%75%100%125%DistanceGame Dur.HP Diff.多联盟训练多联盟训练+Reward Shaping+Reward Shaping、进化算法、进化算法+多目标优化多目标优化方法成本较高、实用性较差方法成本较高、实用性较差拟人化拟人化AIAI、风格化、风格化AIAI研究内容AI AI BotBot拟人化拟人化、（、（多）风格化研究多）风格化研究效果评估都有较强主观性难以量化拟人、多风格的评价标准-提出标准炼丹问题，case by case，现有技术成本高-更实用、自动化的通用技术方案提升业务效果2-1拟人化拟人化拟人化拟人化AIAI、风格化、

6、风格化AIAI拟人化指标评判指标评判指标基本含义基本含义评判方法评判方法客观性客观性从统计学角度统计学角度衡量Bot与人类玩家行为的匹配性单状态、轨迹匹配率动作分布匹配率多样性多样性衡量Bot行为的多样性行为的多样性，以适配不同风格玩家策略熵局间动作分布竞技性竞技性衡量Bot的策略强度策略强度游戏胜率领域相关指标领域相关指标针对特定游戏的相关指标特定游戏的相关指标，例如针对特定游戏可以设计相关移动切换频率、技能连招释放情况等游戏相关指标匹配率位置热力图分布连招释放率图灵测试图灵测试主观人为评判主观人为评判专家或众包评测拟人化指标设计方案拟人化指标设计方案结合主客观特性，设计五类评判指标拟人化拟