(19)国家知识产权局
(12)发明 专利申请
(10)申请公布号
(43)申请公布日
(21)申请 号 202210450506.7
(22)申请日 2022.04.26
(71)申请人 青岛国实科技 集团有限公司
地址 266000 山东省青岛市凤 凰路以西、 创
业路以南
(72)发明人 仇国际 张瑞卫 李欢
(74)专利代理 机构 山东重诺律师事务所 372 28
专利代理师 林婷
(51)Int.Cl.
G06Q 10/10(2012.01)
G06Q 50/02(2012.01)
G06F 16/22(2019.01)
G06F 16/23(2019.01)
(54)发明名称
一种海洋牧场异构数据解析的方法
(57)摘要
本发明提供了一种海洋牧场异构数据解析
的方法, 包括以下步骤: 设定牧场可视化的牧场
数据结构为A, 需要异构解析的牧场数据结构为
B; 查询B中所有牧场站点列表; 遍历牧场站点列
表筛选查询A中某站点解析数据的最后时间, 由
于解析数据是增量更新, 需要知 道最后写入的数
据的时间。 有益效果为: 本发明提出的海洋牧场
异构数据解析的方法是一个单层横向的表结构,
所有的元素数据都在数据表字段中体 现; 数据类
型共分为气象、 水质、 ADCP三类, 每种类型包含不
同的元素类型。
权利要求书1页 说明书6页 附图1页
CN 115082003 A
2022.09.20
CN 115082003 A
1.一种海洋牧场异构数据解析的方法, 其特 征在于, 包括以下步骤:
设定牧场可视化的牧场数据结构为A, 需要异构解析的牧场数据结构为B;
查询B中所有牧场站点列表;
遍历牧场站点列表筛选查询A中某站点解析数据的最后 时间, 由于解析数据是增量更
新, 需要知道最后写入的数据的时间;
筛选出需要解析的数据的批次列表, 根据遍历牧场站点列表筛选查询出的A中数据最
后时间, 从B中筛 选出大于该最后时间的数据的时间列表;
查询出的列表中的每列时间数据+当前的牧场站点 id为一组数据批次;
遍历批次数据, 根据批次中的数据时间、 牧场站点ID从B中筛选出每批数据中的元素类
型数据值;
将数据信息按照A中的数据类型筛选分类, 同类数据合并至一个数据组中, 保存写入A
库中。
2.根据权利要求1所述的一种 海洋牧场异构数据解析的方法, 其特征在于: 筛选出需要
解析的数据的批次列 表查询的时间要 大于遍历 牧场站点列表筛选查询出的最后时间, 筛选
出未解析至A库中的数据时间列表。
3.根据权利要求2所述的一种 海洋牧场异构数据解析的方法, 其特征在于: 该数据解析
为增量更新, 只需要将新增的数据异构解析写入A中。
4.根据权利要求1所述的一种 海洋牧场异构数据解析的方法, 其特征在于: 数据种类包
括气象、 水质、 ADCP。
5.根据权利要求1所述的一种海洋牧场异构数据解析的方法, 其特征在于: ADCP指声学
多普勒流速 。
6.根据权利要求1所述的一种 海洋牧场异构数据解析的方法, 其特征在于: 数据 结构是
一个单层横向的表结构, 所有的元素数据都在数据 表字段中体现, 数据种类共分为气象、 水
质、 ADCP三类, 每种类型包 含不同的元 素类型, 通过ranc h_id字段与牧场站点关联。
7.根据权利要求1所述的一种 海洋牧场异构数据解析的方法, 其特征在于: 需要做异构
解析的海洋牧场数据源表结构为 纵向表结构, 通过aquafarm_id与牧场站 点做关联, 可以根
据不同牧场, 自定义该牧场的海洋牧场元 素。
8.根据权利 要求7所述的一种海洋牧场异构数据解析的方法, 其特征在于: 用element_
id字段与海洋牧场元素类型表的id关联, 确认元素类型, aquafarm_id与牧场表关联确认所
属牧场站点, 相同created_time和aquafarm_id标识 某一海洋牧场站点的同一批次数据。
9.根据权利要求8所述的一种 海洋牧场异构数据解析的方法, 其特征在于: 将海洋牧场
元素类型表、 元素数据表的数据结构异构解析为可视化所用的海洋牧场数据结构的数据结
构并定时写入。权 利 要 求 书 1/1 页
2
CN 115082003 A
2一种海洋牧场异构数据解 析的方法
技术领域
[0001]本发明涉及数据解析技 术领域, 具体为 一种海洋牧场异构数据解析的方法。
背景技术
[0002]“海洋牧场 ”是指在一定海域内, 采用规模化渔业设施和系统化管理体制, 利用自
然的海洋生态环境, 将人工放流的经济海洋生物 聚集起来, 像在陆地放牧牛羊一样, 对鱼、
虾、 贝、 藻等海洋资源进行有计划 和有目的 的海上放养 。
[0003]现有技术中, 海洋牧场综合运用人工智能、 大数据、 云计算、 卫星遥感等先进技术
手段, 以实现对海洋牧场更好地管理。 新技术的广泛运用衍生了大量的业务数据, 这些数据
在海洋牧场的业 务分析与决策中起着重要的作用。
[0004]但是, 现有的海洋牧场数据解析时, 由于各个牧场数据 源的数据结构不完全一致,
需要针对不同的数据源做异构解析处理, 将其转换为前端可视化的对应的数据结构, 无法
实现对重复原 始数据的筛除。
发明内容
[0005]本发明的目的在于提供一种海洋牧场异构数据解析的方法, 以解决上述背景技术
中提出的问题。
[0006]为实现上述目的, 本 发明提供如下技术方案: 一种海洋牧场异构数据解析的方法,
包括以下步骤:
[0007]设定牧场可视化的牧场数据结构为A, 需要异构解析的牧场数据结构为B;
[0008]查询B中所有牧场站点列表;
[0009]遍历牧场站点列表筛选查询A中某站点解析数据的最后时间, 由于解析数据是增
量更新, 需要知道最后写入的数据的时间;
[0010]筛选出需要解析的数据的批次列表, 根据遍历牧场站点列表筛选查询 出的A中数
据最后时间, 从B中筛 选出大于该最后时间的数据的时间列表;
[0011]查询出的列表中的每列时间数据+当前的牧场站点 id为一组数据批次;
[0012]遍历批次数据, 根据批次中的数据时间、 牧场站点ID从B中筛选出每批数据中的元
素类型数据值;
[0013]将数据信息按照A中的数据类型筛选分类, 同类数据合并至一个数据组中, 保存写
入A库中。
[0014]优选的, 筛选出需要解析的数据的批次列表查询的时间要大于遍历牧场站点列表
筛选查询出的最后时间, 筛 选出未解析至A库中的数据时间列表。
[0015]优选的, 该 数据解析为增量更新, 只需要将新增的数据异构解析写入A中。
[0016]优选的, 数据种类包括气象、 水质、 ADCP。
[0017]优选的, ADCP 指声学多普勒流速 。
[0018]优选的, 数据结构是一个单层横向的表结构, 所有的元素数据都在数据表字段中说 明 书 1/6 页
3
CN 115082003 A
3
专利 一种海洋牧场异构数据解析的方法
安全报告 >
其他 >
文档预览
中文文档
9 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
温馨提示:本文档共9页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
本文档由 思考人生 于 2024-02-24 08:49:53上传分享