(19)国家知识产权局
(12)发明 专利申请
(10)申请公布号
(43)申请公布日
(21)申请 号 202210423525.0
(22)申请日 2022.04.21
(71)申请人 广州经传多赢投资咨询有限公司
地址 511400 广东省广州市番禺区东环街
番禺大道北555号 天安总部中心2号楼
1903房
(72)发明人 卢树文 曾赞达 罗文杰 柯年军
周伟杰 谭彪荣
(74)专利代理 机构 北京维正专利代理有限公司
11508
专利代理师 李传亮
(51)Int.Cl.
G06F 16/22(2019.01)
G06F 16/23(2019.01)
G06F 11/14(2006.01)G06Q 40/04(2012.01)
(54)发明名称
一种金融数据列式存储方法、 系统、 设备及
存储介质
(57)摘要
本申请涉及数据存储的技术领域, 公开了一
种金融数据列式存储方法、 系统、 设备及存储介
质, 包括: 将待存储的金融数据输入至列式存储
引擎中, 使金融数据形成若干列结构, 所述列结
构包括由金融数据分解而成的源数据以及用于
标识源数据存放位置和类型的元数据; 从若干所
述列结构中复制元数据并存放在内存中, 以形成
元数据副本; 将若干所述列结构列式存储于硬盘
中, 同一种源数据类型的列结构相邻存放; 为数
据库中的若干所述列结构设置索引列, 并将所述
索引列作为对齐列; 本申请具有提高金融数据的
访存效率的效果。
权利要求书2页 说明书10页 附图9页
CN 114880322 A
2022.08.09
CN 114880322 A
1.一种金融数据列式存 储方法, 其特 征在于: 所述金融数据列式存 储方法的步骤 包括:
将待存储的金融数据输入至列式存储引擎中, 使金融数据形成若干列结构, 所述列结
构包括由金融数据分解而成的源数据以及用于标识源数据存放 位置和类型的元 数据;
从若干所述列结构中复制元 数据并存放在内存中, 以形成元 数据副本;
将若干所述列结构列式存 储于硬盘中, 同一种源数据类型的列结构相邻存放;
为数据库中的若干所述列结构设置索引列, 并将所述索引列 作为对齐列。
2.根据权利要求1所述的一种金融数据列式存储方法, 其特征在于: 将若干所述列 结构
的元数据复制并存放在内存中的步骤之后, 还 包括:
基于若干列结构的元 数据建立 一个基于B+树的数据结构。
3.根据权利要求1所述的一种金融数据列式存储方法, 其特征在于: 为数据库中的若干
所述列结构设置索引列, 并将所述索引列 作为对齐列的步骤之后, 还 包括:
获取数据更新指令, 判断数据更新类型, 所述数据更新类型包括变更和追加;
若所述数据更新类型为追加, 则进一 步判断源数据的预留空间是否充足;
若源数据的预留空间充足, 则获取列结构的写锁, 将待更新数据进行分解后添加至对
应的列结构的源数据中。
4.根据权利要求3所述的一种金融数据列式存储方法, 其特征在于: 若所述数据 更新类
型为追加, 则进一 步判断元 数据的预留空间是否充足的步骤之后, 还 包括:
若元数据的预留空间不充足, 则复制一份元 数据和源数据到新的存 储块中;
基于待更新数据对 源数据进行变更, 并修改元 数据的版本信息;
基于修改后的元数据对B+树进行树结构平衡, 使修改后的元数据在B+树中的权重比修
改前的元数据的权重更高, 下一次通过元数据访问时, 即可阻断旧的源数据, 返回最新归档
的源数据。
5.根据权利要求3所述的一种金融数据列式存储方法, 其特征在于: 获取数据更新指
令, 判断数据更新类型, 所述数据更新类型包括变更和追加的步骤之后, 还 包括:
若所述数据更新类型为变更, 则复制一份元 数据和源数据到新的存 储块中;
基于待更新数据对 源数据进行变更, 并修改元 数据的版本信息;
基于修改后的元数据对B+树进行树结构平衡, 使修改后的元数据在B+树中的权重比修
改前的元数据的权重更高, 下一次通过元数据访问时, 即可阻断旧的源数据, 返回最新归档
的源数据。
6.根据权利要求4所述的一种金融数据列式存储方法, 其特征在于: 基于修改后的元数
据对B+树进 行树结构平衡, 使修改后的元数据在B+树中的权重比修改前的元数据的权重更
高的步骤之后, 还 包括:
定期获取元数据的版本信息, 并结合元数据的用户引用计数信息进行判断, 以对旧版
本的元数据以及对应的源数据进行清理, 以减少数据库中的数据量。
7.一种列式存储金融数据读取方法, 其特征在于: 所述列式存储金融数据读取方法用
于读取上述任一金融数据列式存 储方法所存 储的金融数据, 包括:
获取金融数据读取信号, 从内存中查询所述金融数据读取信号对应的元 数据;
获取读锁, 基于所述元 数据对硬 盘进行一次寻道, 以定位对应的列结构;
将列结构中的源数据复制至内存中以供发出读 操作信号的用户获取。权 利 要 求 书 1/2 页
2
CN 114880322 A
28.一种金融数据列式存 储系统, 其特 征在于, 包括:
列结构生成模块, 用于将待存储的金融数据输入至列式存储引擎中, 使金融数据形成
若干列结构, 所述列结构包括由金融数据分解而成的源数据以及用于标识源数据存放位置
和类型的元 数据;
元数据存储模块, 用于从若干所述列结构中复制元数据并存放在内存中, 以形成元数
据副本;
列结构存储模块, 用于将若干所述列结构列式存储于硬盘中, 同一种源数据类型的列
结构相邻存放;
对齐列设置模块, 用于为数据库中的若干所述列结构设置索引列, 并将所述索引列作
为对齐列。
9.一种计算机设备, 包括存储器、 处理器以及存储在所述存储器中并可在所述处理器
上运行的计算机程序, 其特征在于, 所述处理器执行所述计算机程序时实现如权利要求 1至
6任一项所述用于金融数据列式存 储方法的步骤。
10.一种计算机可读存储介质, 所述计算机可读存储介质存储有计算机程序, 其特征在
于, 所述计算机程序被处理器执行时实现如权利要求 1至6任一项 所述用于金融数据列式存
储方法的步骤。权 利 要 求 书 2/2 页
3
CN 114880322 A
3
专利 一种金融数据列式存储方法、系统、设备及存储介质
安全报告 >
其他 >
文档预览
中文文档
22 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
温馨提示:本文档共22页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
本文档由 思考人生 于 2024-02-24 08:49:56上传分享