(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211226349.8 (22)申请日 2022.10.09 (71)申请人 中关村科 学城城市大脑 股份有限公 司 地址 100081 北京市海淀区中关村南大街5 号1区689号楼海淀科技大厦6层 (72)发明人 王远航　张聪聪　王静宇　李建华　 张昆鹏　 (74)专利代理 机构 北京劲创知识产权代理事务 所(普通合伙) 11589 专利代理师 王闯 (51)Int.Cl. G06F 16/36(2019.01) G16H 20/60(2018.01) G06Q 30/02(2012.01)G06Q 50/12(2012.01) G06K 9/62(2022.01) (54)发明名称 一种基于强化学习的知识图谱食堂饭菜调 配方法及系统 (57)摘要 本发明涉及一种基于强化学习的知识图谱 食堂饭菜调配方法及系统， 在实现饭菜调配过程 中获取天气信息、 节假日信息、 事件信息中的至 少一项； 上述信息输入至基于强化学习的以学生 总体视作智能体的智能体模型； 智能体模型依据 餐品知识图谱， 按照餐品类别及餐品间搭配关系 的奖励数值选择出餐品配置 路径， 输出食堂饭菜 提供配置方案。 本发明综合考虑时间信息、 天气 情况、 节假日信息及诸如体测运动会事件等信 息， 实现为学校食堂推荐每日荤素搭配合理且受 学生喜爱的饭菜调配方案 。 权利要求书1页 说明书4页 附图2页 CN 115292521 A 2022.11.04 CN 115292521 A 1.一种基于强化学习的知识图谱 食堂饭菜调配方法， 其特 征在于， 包括： 获取天气信息、 节假日信息、 事 件信息中的至少一项； 将所述天气信息、 节假日信息、 事件信息中的至少一项输入至基于强化学习的以学生 总体视作智能体的智能体模型； 所述智能体模型依据餐品知识图谱， 按照餐品类别及餐品间搭配关系的奖励数值选择 出餐品配置路径， 输出食堂饭菜提供配置方案 。 2.根据权利要求1所述的方法， 其特 征在于， 所述知识图谱是依据餐品种类、 搭配关系 、 营养关系及忌食搭配建立。 3.根据权利要求1所述的方法， 其特 征在于， 所述餐品类别包括主食、 菜品、 汤水、 水果、 甜品。 4.根据权利要求3所述的方法， 其特 征在于， 所述选择 出餐品配置路径的餐品类别顺序为主食 ‑菜品‑水果的顺序。 5.根据权利要求 4所述的方法， 其特 征在于， 所述智能体模型是利用包括学生每日在餐厅的消费总额、 消费次数及消费饭菜荤素搭 配比例的训练数据训练得到， 将学生在食堂吃饭次数增多视作奖励情况， 将每日销售饭菜 荤素搭配情况视作奖励； 智能体模型训练得到的奖励数值更新到知识图谱的餐品节点之间， 作为餐品节点之间 最新的奖励数值。 6.一种基于强化学习的知识图谱 食堂饭菜调配系统， 其特 征在于， 所述系统包括： 输入信息模块， 获取天气信息、 节假日信息、 事 件信息中的至少一项； 知识图谱模块， 用于根据训练数据获得并存储餐品节点以及餐品节点之间搭配关系 对 应的奖励数值； 智能体模型， 依据餐品知识图谱， 按照餐品类别及餐品间搭配关系的奖励数值选择出 餐品配置路径， 输出食堂饭菜提供配置方案 。 7.根据权利要求6所述的系统， 其特 征在于， 所述系统进一 步还包括： 训练数据模块， 用于获取包括学生每日在餐厅的消费总额、 消费次数及消费饭菜荤素 搭配比例的训练数据； 强化学习训练模块， 用于根据训练数据获得智能体模型以及知识图谱餐品节点之间搭 配关系的奖励数值。 8.根据权利要求6或7 所述的系统， 其特 征在于， 所述餐品类别包括主食、 菜品、 汤水、 水果、 甜品。 9.根据权利要求8所述的系统， 其特 征在于， 所述智能体模型选择 出餐品配置路径的餐品类别顺序为主食 ‑菜品‑水果的顺序。 10.根据权利要求6所述的系统， 其特 征在于， 所述餐品 间搭配关系为 不宜同食的情况 下， 对应的奖励数值配置为负值。权　利　要　求　书 1/1 页 2 CN 115292521 A 2一种基于强化学习的知识图谱食堂饭菜调配方 法及系统 技术领域 [0001]本发明涉及人工智能技术领域， 具体涉及 一种基于强化学习的知识图谱食堂饭菜 调配方法及系统。 背景技术 [0002]现阶段高校食堂都实行经济承包制或者是公办制， 高校食堂就成为了一类服务型 企业， 并且在髙校范围内具有一定的经营垄断意义。 在 食堂饭菜方面， 相关负责人会预先制 定荤素搭配合适的方案， 按照周期为同学们准备饭菜， 长年累月之下， 同学们会对饭菜的种 类及口味产生抵触， 导 致点外卖情况增多的现象。 [0003]受到传统经营模式的影响， 高校食堂 的制度、 成本管理方法及服务方法都没有与 当前社会接轨， 相比校外以盈利为主的饭店， 缺少竞争性。 最主要的原因是饭菜样数一 成不 变， 且口味单调， 导致同学们对学校的抱怨及点外卖情况 的增多， 不仅损害学校声誉， 还不 利于同学们身体健康。 发明内容 [0004]有鉴于此， 本发明的目的在于提供一种基于强化学习的知识图谱食堂饭菜调配方 法及系统， 以解决现有学 校食堂饭菜等餐品搭配不 适应学生口味的问题。 [0005]根据本发明实施例的第一方面， 提供一种基于强化学习的知识图谱食堂饭菜调配 方法， 包括: 获取天气信息、 节假日信息、 事 件信息中的至少一项； 将所述天气信息、 节假日信息、 事件信息中的至少一项输入至基于强化学习的以 学生总体视作智能体的智能体模型； 所述智能体模型依据餐品知识图谱， 按照餐品类别及餐品间搭配关系的奖励数值 选择出餐品配置路径， 输出食堂饭菜提供配置方案 。 [0006]进一步地， 所述知识图谱是依据餐品种类、 搭配关系 、 营养关系及忌食搭配建立。 [0007]进一步地， 所述餐品类别包括主食、 菜品、 汤水、 水果、 甜品。 [0008]进一步地， 所述选择 出餐品配置路径的餐品类别顺序为主食 ‑菜品‑水果的顺序。 [0009]进一步地， 所述智能体模型是利用包括学生每日在餐厅的消费总额、 消费次数及 消费饭菜荤素搭配比例的训练数据训练得到， 将学生在食堂吃饭次数增多视作奖励情况， 将每日销售饭菜荤素 搭配情况视作奖励； 智能体模型训练得到的奖励数值更新到知识图谱的餐品节点之间， 作为餐品节点 之间最新的奖励数值。 [0010]根据本发明实施例的另一方面， 还提供一种基于强化学习的知识图谱食堂饭菜调 配系统， 包括 所述系统包括： 输入信息模块， 获取天气信息、 节假日信息、 事 件信息中的至少一项；说　明　书 1/4 页 3 CN 115292521 A 3