(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210188667.3 (22)申请日 2022.02.28 (71)申请人 浙江绿城未来数智科技有限公司 地址 311100 浙江省杭州市余杭区鼎创财 富中心2幢10层1 101室 (72)发明人 张焕　陈霄　周志湖　赵永标　 秦海龙　孟雯倩　蔡妃雅　 (74)专利代理 机构 合肥市科融知识产权代理事 务所(普通 合伙) 34126 专利代理师 吴伟栋 (51)Int.Cl. G06Q 10/06(2012.01) G06Q 50/20(2012.01) G06Q 50/26(2012.01) G06F 16/36(2019.01)G06F 40/35(2020.01) (54)发明名称 一种基于AI数字人的未来社区数字孪生管 理系统 (57)摘要 本发明公开了一种基于AI数字人的未来社 区数字孪生管理系统， 属于未来社区管理技术领 域。 一种基于AI数字人的未来社区数字孪生管理 系统， 包括AI数字人以及运行于未来社区中控室 大屏上的数字孪生运营模块、 数字人引擎模块和 云处理模块； 数字孪生运营模块与数字人引擎模 块信号连接； 数字人引擎模块与云处理模块信号 连接； 数字孪生运营模块将业务指令通过数字人 引擎模块上传至云处理模块； 云处理模块将业务 反馈通过数字人引擎模块上传至数字孪生运营 模块； 不仅可以满足近场及远场紧急救助上报的 需求， 不需要用户近距离接触数字孪生大屏设 备， 还可以增 加社区系统信息 检索的效率。 权利要求书2页 说明书5页 附图5页 CN 114548803 A 2022.05.27 CN 114548803 A 1.一种基于AI数字人的未来社区数字孪生管理系统， 其特征在于： 包括AI数字人以及 运行于未来社区中控室大屏上的数字 孪生运营模块、 数字人引擎模块和云处 理模块； 数字孪生运营模块与 数字人引擎模块信号连接； 数字人引擎模块与云处理模块信号连 接； 数字孪生运营模块将业务指令通过数字人引擎模块上传至云处理模块； 云处理模块将 业务反馈通过 数字人引擎模块上传至数字 孪生运营模块； 数字孪生运营模块包括数据面板模块、 AI数字人参数配置模块、 可视化3D引擎模块和 开放接口模块； 数据面板模块通过Web数据图表综合展示未来社区各场景的人、 空间、 设备和事务数 据； AI数字人参数配置模块通过低代码的参数调 节面板调整AI数字人的基础配置； 数据人 参数配置模块可内嵌在可视化3D引擎模块内使用； 可视化3D引擎模块用于提供数字孪生场景空间渲染以及高清晰度和高仿真性的物理 渲染； 开放接口模块用于整合可视化3D引擎模块的交互能力生成前端Web页面的开放调用接 口， 开放调用接口和数据面板模块共同组合 提供的上层调用接口包 含在开放接口模块中； 数字人引擎模块包括肢体引擎模块、 面部表情引擎模块、 AI视觉引擎模块、 技能配置引 擎模块和知识图谱引擎模块； 肢体引擎模块用于管理AI数字人肢体动作参数； 面部表情引擎模块用于管理AI数字人面部表情； AI视觉引擎模块用于人脸识别、 表情识别、 物体 检测和语义分割； 技能配置引擎模块用于提供AI数字人的对话策略和对话能力； 技能配置引擎模块包括 对话式系统、 FAQ系统、 结构化文档、 非结构化文档； 知识图谱引擎模块 为数字人引擎模块的知识数据库； 云处理模块包括物联网l oT中台、 NLP算法训练中 台和消息调度中 台； 物联网loT中台用于管控未来社区内的物联设备； 消息调度中 台为消息通信中 台， 用于物联、 上层应用和系统指令的消息传递分发； NLP算法训练中 台用于为 技能配置引擎模块 提供NLP核心算法。 2.根据权利要求1所述的一种基于AI数字人的未来社区数字孪生管理系统， 其特征在 于： 业务反馈包括但不限于数据计算、 算法预测结果输出和音频合成 驱动。 3.根据权利要求1所述的一种基于AI数字人的未来社区数字孪生管理系统， 其特征在 于： 肢体引擎模块中内置20个预置肢体动画骨骼， 可拓展定制动画骨骼和动捕设备的骨骼 动画数据， 兼容fbx、 bvh格式。 4.根据权利要求1所述的一种基于AI数字人的未来社区数字孪生管理系统， 其特征在 于： 面部表情引擎模块可兼容以下两种输入方式： （1） 、 语音文件驱动面部特征点运动模式； 语音文件驱动通过语音Sequence2Sequence 算法解析输出语言学通用音子， 音子对应通用的表情运动特征， 以口型为主， 通过归类计算 灵活调用适 合的口型， 满足逼真实时的对话任务； （2） 、 真人面部动捕数据导入对应运动模式； 真人数据输入驱动表情适合用于特定的应 用场景， 提取真人音频数据的fb ank特征、 结合deepspeech模块的音频特征提高算法泛化权　利　要　求　书 1/2 页 2 CN 114548803 A 2性， 开发标准的面部控制器系统， 满足有社区IP或特殊人物IP定制的需求。 5.根据权利要求1所述的一种基于AI数字人的未来社区数字孪生管理系统， 其特征在 于： AI视觉引擎模块支持以下 数据输入终端设备： （1） 、 大屏配套使用的智能设备， 智能设备包括但不限于人脸相机、 Ipad、 AR眼镜； AI数 字人可通过前端设备激活人脸识别， 主动 发出身份确认的语音问候， 同时进行历史数据的 调用， 人物使用历史日志可以作为知识图谱的历史语料训练数据， 深度支撑 本轮交互； （2） 、 园区安全摄像头； 园区安全摄像头用于大范围户外物体的视觉识别工作， 主要提 供实时海量的多模态训练基础， 同时在NLP算法的支撑下实现AI数字人的搜索引擎与推荐 对话功能， 实时准确的对未来社区内的数字化元 素进行检索和搜索。 6.根据权利要求1所述的一种基于AI数字人的未来社区数字孪生管理系统， 其特征在 于： 知识图谱领域包括开放领域和专 业领域， 面向未来社区的多个场景数据， 构建多个图谱 数据库， 以Ber t大模型预训练图数据库的关系数据， 聚类多元组实体关系和语义关系。 7.根据权利要求1所述的一种基于AI数字人的未来社区数字孪生管理系统， 其特征在 于： AI数字人的SDK可集 成于未来社区全屋智能的智能硬件中， 基于家庭投影生成技术提供 服务AI数字人； AI数字人终端载体兼容智能镜面和墙壁投影。权　利　要　求　书 2/2 页 3 CN 114548803 A 3