(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 20221080910 3.7 (22)申请日 2022.07.11 (65)同一申请的已公布的文献号 申请公布号 CN 115104548 A (43)申请公布日 2022.09.27 (73)专利权人 深圳市前海远为科技有限公司 地址 518000 广东省深圳市前海深港合作 区前湾一路1号A栋201室 （入驻深圳市 前海商务秘书 有限公司） (72)发明人 汪晶　 (74)专利代理 机构 深圳市世纪宏博知识产权代 理事务所(普通 合伙) 44806 专利代理师 赖智威 (51)Int.Cl. A01K 29/00(2006.01) A61B 5/00(2006.01) A61B 5/0205(2006.01)G10L 25/09(2013.01) G10L 25/24(2013.01) G10L 25/51(2013.01) H04N 7/18(2006.01) G08B 21/24(2006.01) (56)对比文件 CN 114667948 A,202 2.06.28 CN 21542 2223 U,202 2.01.07 CN 2087084 44 U,2019.04.09 CN 110335617 A,2019.10.15 CN 112331231 A,2021.02.0 5 CN 112401888 A,2021.02.26 CN 108157219 A,2018.0 6.15 US 2016015005 A1,2016.01.21 US 2017097169 A1,2017.04.0 6 US 2018317875 A1,2018.1 1.08 审查员 王小兰 (54)发明名称 基于多媒体信息技术的宠物行为调整和人 宠互动方法及装置 (57)摘要 本发明涉及智能宠物教育领域， 一种基于多 媒体信息技术的宠物行为调整和人宠互动方法 及装置， 包括： 接收宠物行为监测指令， 启动监控 设备拍摄宠物视频影像， 利用心率传感器和温度 传感器测试宠物心率与温度值， 并判断所述宠物 心率与温度值是否满足健康条件， 若满足继续执 行所述监测指令， 若不满足启动声音采集单元获 取宠物音频， 经预加重、 分帧加窗、 端点检测处理 后， 提取所述宠物音频特征参数， 并归类入预构 建的存档宠物声音集， 根据归类结果， 判断所述 宠物音频反映出的宠物需求， 最后基于所述宠物 视频影像与APP远程终端发送的奖惩指令， 完成 宠物行为调整和人宠互动。 本发 明可解决当前智 能互动装置对于宠物健康监测不足、 宠物需求缺 乏判断的问题。 权利要求书4页 说明书13页 附图4页 CN 115104548 B 2022.12.27 CN 115104548 B 1.一种基于多媒体信息技术的宠物行为调整和人宠互动方法， 其特征在于， 所述方法 包括： 接收APP远程终端发送 的宠物行为监测指令， 根据所述宠物行为监测指令启动宠物项 圈中的声 音采集单 元和传感器单 元， 其中所述传感器单 元包括心率传感器和温度传感器； 利用所述心率传感器测试 宠物心率， 并获取 所述温度传感器的宠物温度值； 判断所述宠物心率、 宠物温度值是否满足健康条件， 若所述宠物心率、 宠物温度值满足 健康条件， 继续执行所述宠物行为监测指令， 若所述宠物心率、 宠物温度值不满足健康条 件， 启动所述声 音采集单 元； 获取所述声音采集单 元的初始音频， 通过 预加重、 分帧加窗处 理， 得到分帧加窗音频； 对所述分帧加窗音频进行端点监测， 并提取所述分帧加窗音频的特征参数； 基于所述 特征参数， 将所述分帧加窗音频归类入 预构建的存档宠物声音集， 根据归类结果， 判断得到 所述分帧加窗音频反映出的宠物需求； 若所述分帧加窗音频反映出宠物就医需求， 发送就医警示信息至APP远程终端， 提醒宠 物主人携带宠物及时就医， 若 所述分帧加窗音频反映出宠物陪伴需求， 接收APP远程 终端发 送的人宠互动 指令， 开启所述宠物项圈内的扬 声器， 构建所述APP远程 终端及宠物接收端的 语音会话连接， 实现宠物行为调整和人 宠互动； 所述获取所述声音采集单元的初始音频， 通过预加重、 分帧加窗处理， 得到分帧加窗音 频， 包括： 构建预加重处 理函数， 其中所述预加重处 理函数如下： 其中， 代表n时刻预加重处理后得到的宠物加重音频， 代表预加重系数， 取值 0.98， 代表n时刻所述声 音采集单 元获取的宠物初始音频； 利用所述预加重处 理函数处 理初始音频， 得到所述加重音频； 分帧加窗处 理所述加重音频， 得到分帧加窗音频。 2.如权利要求1所述的基于多媒体信息技术的宠物行为调整和人宠互动方法， 其特征 在于， 所述利用所述心率传感器测试 宠物心率， 包括： 启动所述心率传感器， 其中所述心率传感器包含光发射二极管、 光电二极管、 光敏传感 器、 AD转换器四个元件； 利用所述 光发射二极管向宠物皮肤发射 光波， 让所述光波照进宠物皮肤内部； 通过所述光电二极管接收被宠物皮肤反射 回的剩余光波， 并利用所述光敏传感器将剩 余光波转换为电信号； 基于所述AD转换器将所述电信号 转换为数字信号， 获得 所述宠物 心率。 3.如权利要求1所述的基于多媒体信息技术的宠物行为调整和人宠互动方法， 其特征 在于， 所述分帧加窗处 理所述加重音频， 得到分帧加窗音频， 包括： 设置所述宠物加重音频分帧的帧长数值； 基于pytho n对所述加重音频 执行分帧操作， 得到宠物分帧音频； 构建加窗函数对所述宠物分帧音频执行加窗操作， 得到所述分帧加窗音频， 其中， 所述权　利　要　求　书 1/4 页 2 CN 115104548 B 2加窗函数如下： 其中， 为所述加窗函数， 为所述宠物加重音频分帧的帧长数值所对应的窗口长 度， 具体取值 为b， n为所述宠物分帧音频的时刻。 4.如权利要求1所述的基于多媒体信息技术的宠物行为调整和人宠互动方法， 其特征 在于， 所述对所述分帧加窗音频进行端点监测， 并提取所述分帧加窗音频的特征参数， 包 括： 构建短时能量 函数计算所述分帧加窗音频短时能量， 其中所述短时能量 函数如下： 其中， 代表宠物分帧加窗音频每 一帧的短时能量， K为 所述宠物加重音频分帧的帧长 数值， 代表第t帧所述宠物分帧加窗音频； 基于预设的短时能量门限值， 过滤所述分帧加窗音频中的静音部分， 得到宠物能量音 频； 计算所述宠物能量音频的短时过零率， 进一步过滤所述宠物能量音频中的静音段， 得 到宠物端点音频； 利用特征提取函数提取 所述宠物端点音频的特 征参数。 5.如权利要求4所述的基于多媒体信息技术的宠物行为调整和人宠互动方法， 其特征 在于， 所述计算所述宠物 能量音频的短时过零率， 进一步过滤所述宠物 能量音频中的静音 段， 得到宠物端点音频， 包括： 构建如下函数计算所述宠物能量音频的短时过零 率： 其中， 为所述宠物能量音频的短时过零率， 代表第t帧所述宠物分帧加窗音频， K 为所述宠物加重音频分帧的帧长数值， 的阶跃函数； 设置静音段 过零率门限值； 过滤掉所述短时过零率在静音段过零率门限值范围外的宠物能量音频， 得到所述宠物 端点音频。 6.如权利要求4所述的基于多媒体信息技术的宠物行为调整和人宠互动方法， 其特征 在于， 所述利用特 征提取函数提取 所述宠物端点音频的特 征参数， 包括： 基于pytho n对所述宠物端点音频进行 快速傅里叶变换， 得到宠物能量频谱； 利用M个三角滤波器对所述宠物能量频谱进行平滑并消除谐波操作， 得到宠物平滑能权　利　要　求　书 2/4 页 3 CN 115104548 B 3