(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210648201.7 (22)申请日 2022.06.09 (71)申请人 江西日月明测控科技股份有限公司 地址 330029 江西省南昌市高新 技术产业 开发区高新四路9 99号 (72)发明人 朱洪涛　朱磊　陶捷　王志勇　 吴维军　张苗苗　 (74)专利代理 机构 北京清亦华知识产权代理事 务所(普通 合伙) 11201 专利代理师 何世磊 (51)Int.Cl. G06F 16/2453(2019.01) G06F 16/2455(2019.01) G06F 16/27(2019.01) (54)发明名称 基于Hadoop的轨检数据服 务系统 (57)摘要 本发明提供一种基于Hadoop的轨检数据服 务系统， 包括： 数据采集模块， 用于采集各轨检设 备的当前轨检数据； 数据处理模块包括数据对齐 单元及数据处理单元， 数据对齐单元用于利用历 史轨检数据对各当前轨检数据进行局部插值及 压缩， 以实现历史轨检数据和各当前轨检数据的 特征点匹配， 进而得到数据对齐的轨检数据； 数 据处理单元用于将数据对齐的轨检数据进行数 据预处理， 以得到多组预处理的轨检数据， 并对 多组预处理的轨检数据进行分布式处理， 以实现 用户与各轨检 设备的信息交互。 本发 明通过数据 对齐单元将各当前轨检数据与历史轨检数据以 特征点为标志进行数据对齐， 为后续数据分析排 除里程误差干扰； 通过分布式处理提高轨检数据 的高效利用以及分类管理。 权利要求书2页 说明书23页 附图12页 CN 114936224 A 2022.08.23 CN 114936224 A 1.一种基于Hadoop的轨检数据服务系 统， 其特征在于， 包括数据采集模块以及数据处 理模块： 所述数据采集模块， 用于采集各轨检设备的当前轨检数据； 所述数据处理模块， 包括数据对齐单元以及数据处理单元， 所述数据对齐单元用于利 用历史轨检数据对各所述当前轨检数据进 行局部插值及压缩， 以实现所述历史轨检数据和 各所述当前轨检数据的特 征点匹配， 进 而得到数据对齐的轨检数据； 所述数据处理单元用于将所述数据对齐的轨检数据进行数据预处理， 以得到多组预处 理的轨检数据， 并对所述多组预处理的轨检数据进行分布式处理， 以判断所述数据对齐的 轨检数据是否符合预设要求， 若所述数据对齐的轨检数据符合预设要求， 则生成对应的数 据报表， 以实现用户与各 所述轨检设备的信息交 互。 2.根据权利要求1所述的基于Hadoop的轨检数据服务系统， 其特征在于， 所述基于 Hadoop的轨检数据服务系统还包括数据库 支持模块， 所述数据库 支持模块用于根据利用各 轨检设备所获取的轨检数据生成多个轨检台账数据库、 以及根据用户权限生成多个权限管 理数据库， 所述多个轨检台账数据库至少 包括平面曲线数据库、 竖曲线数据库、 CP3数据库 以及轨枕信息数据库， 所述多个权限管理数据库至少包括 规范管理数据库。 3.根据权利 要求1所述的基于Hadoop的轨检数据服务系统， 其特征在于， 所述数据处理 模块还包括文件存储单元， 所述文件存储单元用于将小于预设存储大小的文件按照所占内 存空间进行均匀分布， 以使合并后的文件符合预设的数据块 最大阈值。 4.根据权利 要求1所述的基于Hadoop的轨检数据服务系统， 其特征在于， 所述文件存储 单元具体用于： 当接收到文件存储请求 时， 初始化数据队列、 并创建多个临时队列、 多个合并队列以及 多个文件信息映射表， 其中， 所述临时队列的个数小于所述 合并队列的个数； 获取当前上传的文件， 并比较所述当前上传的文件的存储大小与所述临时队列的剩余 存储空间， 若所述临时队列的剩余存储空间大于所述当前上传的文件的存储大小， 则将所 述当前上传的文件存储到所述临 时队列中、 并查看所述文件信息映射表中是否存在所述当 前上传的文件； 若所述文件信 息映射表中存在所述当前上传的文件， 则判断所述临时队列中所有文件 所占空间是否 达到所述临时队列的预设阈值空间的第一阈值； 若所述临时队列中所有文件所占空间达到所述临时队列的预设阈值空间的第 一阈值， 则将所述临时队列中所有文件进行合并， 直到达到所述临时队列的预设阈值空间， 得到所 述临时队列所对应的合并队列； 找到所述临时队列中所占存储空间最大的文件， 并判断所述所占存储空间最大的文件 的存储大小是否大于所述临时队列的预设阈值空间的第二阈值； 若所述所占存储空间最大的文件的存储大小大于所述临时队列的预设阈值空间的第 二阈值， 则将所述当前上传的文件存放在所述临时队列所对应的合并队列中， 并在其他的 临时队列中寻找友好文件， 并将寻找到的所有友好文件均存入所述临时队列所对应的合并 队列中进行文件打包上传。 5.根据权利 要求4所述的基于Hadoop的轨检数据服务系统， 其特征在于， 所述文件存储 单元还用于：权　利　要　求　书 1/2 页 2 CN 114936224 A 2若所述所占存储空间最大的文件的存储大小不大于所述临时队列的预设阈值空间的 第二阈值， 则持续向所述临时队列中上传文件， 直到所述临时队列中所有文件所占空间大 于等于所述临时队列的预设阈值空间的第二阈值； 将所述当前上传的文件存放在所述临时队列所对应的合并队列中， 并在其他的临时队 列中寻找友好文件， 并将寻找到的所有友好文件均存入所述临时队列所对应的合并队列中 进行文件打包上传。 6.根据权利 要求1所述的基于Hadoop的轨检数据服务系统， 其特征在于， 所述数据对齐 单元具体用于： 在所述历史轨检数据和各所述当前轨检数据中给定两个等 时间间隔的相同特征序列， 并计算出两所述相同特征序列之间任意两点的距离， 以得到两所述相同特征序列的距离矩 阵； 利用动态规划法计算出两所述相同特征序列的距离矩阵的最优规划路径， 根据 所述最 优规划路径计算出两所述相同特征序列的最小动态时间规整距离， 以使两所述相同特征序 列进行数据对齐。 7.根据权利要求1所述的基于Hadoop的轨检数据服务系统， 其特征在于， 所述基于 Hadoop的轨检数据服务系统还包括分析模块， 所述分析模块用于对所述数据采集模块所采 集的数据进 行数据分析， 所述数据分析至少包括轮廓数据分析、 波磨数据分析、 板翘 分析以 及焊缝平直度分析。 8.根据权利要求1所述的基于Hadoop的轨检数据服务系统， 其特征在于， 所述基于 Hadoop的轨检数据服务系统还包括报表生 成模块， 所述报表 生成模块用于将各模块所输出 的数据转换成对应的数据报表， 以使用户进行查看。 9.根据权利要求1所述的基于Hadoop的轨检数据服务系统， 其特征在于， 所述基于 Hadoop的轨检数据服务系统还包括数据共享模块， 所述数据共享模块用于创建数据共享规 则， 并利用所述数据共享 规则向各平台提供统一的数据分发出口服 务。 10.根据权利要求1所述的基于Hadoop的轨检数据服务系统， 其特征在于， 还包括数据 可视化模块， 所述数据可视化模块包括第一可视化模块以及第二可视化模块， 所述第一可 视化模块用于将不同时间下所述数据采集模块所采集的采样数据进行连接， 以展示所述数 据采集模块的测量信号与时间的变化程度； 所述第二可视化模块用于对所述数据采集模块 所采样的数据信号进行积分处 理， 以展示所述数据采集模块的当前信号强度。权　利　要　求　书 2/2 页 3 CN 114936224 A 3