(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210372213.1 (22)申请日 2022.04.11 (71)申请人 安天科技 集团股份有限公司 地址 150028 黑龙江省哈尔滨市高新 技术 产业开发区科技创新城创新创业广场 7号楼 (世坤路838号) (72)发明人 刘威 韩斯 肖新光  (74)专利代理 机构 北京格允知识产权代理有限 公司 11609 专利代理师 王文雅 (51)Int.Cl. G06F 16/242(2019.01) G06F 16/2453(2019.01) G06F 16/23(2019.01) (54)发明名称 基于ANTLR的数据采集方法、 装置、 电子设备 及存储介质 (57)摘要 本发明提供了一种基于ANTLR的数据采集方 法、 装置、 电子设备及存储介质, 其中方法包括: 获取数据采集查询文件; 所述数据采集查询文件 是利用预设语法规则对第三方数据的采集需求 进行编写得到的; 获取由ANTLR工具对所述第三 方数据转换的语 法树; 解析所述数据采集查询文 件, 得到所述采集需求; 根据所述采集需求调用 所述ANTLR工具中对应的API, 以利用所述API按 照所述采集需求从所述语 法树中进行数据采集。 本方案, 能够提高数据采集效率。 权利要求书2页 说明书10页 附图2页 CN 114691715 A 2022.07.01 CN 114691715 A 1.一种基于ANTLR的数据采集方法, 其特 征在于, 包括: 获取数据采集查询文件; 所述数据采集查询文件是利用预设语法规则对第 三方数据的 采集需求进行编写得到的; 获取由ANTLR工具对所述第三方 数据转换的语法树; 解析所述数据采集 查询文件, 得到所述采集需求; 根据所述采集需求调用所述ANTLR工具中对应的API, 以利用所述API按照所述采集需 求从所述语法树中进行 数据采集。 2.根据权利要求1所述的方法, 其特 征在于, 所述数据采集 查询文件的编写方式, 包括: 基于所述第 三方数据的数据源和所述采集需求中的数据目的地, 在所述数据采集查询 文件中使用SQ L语句定义数据的输入和输出; 基于所述采集需求中的数据提取转换方式以及定义的输入和输出, 在所述数据采集查 询文件中使用SQ L语句定义数据提取转换 方式。 3.根据权利要求2所述的方法, 其特征在于, 所述数据采集查询文件的编写方式, 进一 步包括: 基于所述采集需求中的通用采集方式, 在所述数据采集查询文件中定义所述通用采集 方式。 4.根据权利要求2所述的方法, 其特 征在于, 还包括: 基于所述采集需求中的通用采集方式, 选择与所述通用采集方式相对应的配 置文件; 在所述得到所述采集需求之前, 还包括: 对所述配置文件进行解析, 结合对所述数据采 集查询文件的解析 结果, 得到所述采集需求。 5.根据权利要求3或4所述的方法, 其特征在于, 所述通用采集方式包括目标语言、 并行 度和解析格式 中的至少一种。 6.根据权利要求2所述的方法, 其特征在于, 所述基于所述采集需求中的数据提取转换 方式以及定义的输入和输出, 在所述数据采集查询文件中使用SQL语句定义数据提取转换 方式, 包括: 根据所述数据提取转换 方式确定数据查询语言DQ L中的查询函数; 将定义的输入和输出确定为所述查询函数中的参数名, 以利用所述查询函数定义所述 数据提取转换 方式。 7.根据权利要求1 ‑4、 6中任一所述的方法, 其特 征在于, 在所述根据所述采集需求调用所述ANTLR工具中对应的API之前, 还 包括: 获取所述ANTLR工具中每一个API的实现功能及其调用编号; 所述根据所述采集需求调用所述ANTLR工具中对应的API, 包括: 根据所述ANTLR工具中每一个API的实现功能, 确定用于实现所述采集需求的若干个目 标API; 将所述若干个目标API分别 对应的调用编号发送至所述ANTLR工具, 以实现对所述若干 个目标API的调用。 8.一种基于ANTLR的数据采集装置, 其特 征在于, 包括: 文件获取单元, 用于获取数据采集查询文件; 所述数据采集查询文件是利用预设语法权 利 要 求 书 1/2 页 2 CN 114691715 A 2规则对第三方 数据的采集需求进行编写得到的; 语法树获取 单元, 用于获取由ANTLR工具对所述第三方 数据转换的语法树; 解析单元, 用于解析 所述数据采集 查询文件, 得到所述采集需求; 调用单元, 用于根据所述采集 需求调用所述ANTLR工具中对应的API, 以利用所述API按 照所述采集需求从所述语法树中进行 数据采集。 9.一种电子设备, 包括存储器和处理器, 所述存储器中存储有计算机程序, 所述处理器 执行所述计算机程序时, 实现如权利要求1 ‑7中任一项所述的方法。 10.一种计算机可读存储介质, 其上存储有计算机程序, 当所述计算机程序在计算机中 执行时, 令计算机执 行权利要求1 ‑7中任一项所述的方法。权 利 要 求 书 2/2 页 3 CN 114691715 A 3

.PDF文档 专利 基于ANTLR的数据采集方法、装置、电子设备及存储介质

安全报告 > 其他 > 文档预览
中文文档 15 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共15页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 基于ANTLR的数据采集方法、装置、电子设备及存储介质 第 1 页 专利 基于ANTLR的数据采集方法、装置、电子设备及存储介质 第 2 页 专利 基于ANTLR的数据采集方法、装置、电子设备及存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 思考人生2024-02-24 08:50:02上传分享
给文档打分
您好可以输入 255 个字符
网站域名是多少( 答案:github5.com )
评论列表
  • 暂时还没有评论,期待您的金玉良言
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。