全网唯一标准王
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210944954.2 (22)申请日 2022.08.08 (71)申请人 中亿 (深圳) 信息科技有限公司 地址 518000 广东省深圳市南 山区桃源街 道龙光社区龙珠三路光前工业区18 栋 3层301 (72)发明人 彭长江  (74)专利代理 机构 深圳市诺正鑫泽知识产权代 理有限公司 4 4689 专利代理师 孙凯乐 (51)Int.Cl. G06F 16/23(2019.01) G06F 16/27(2019.01) G06F 16/2455(2019.01) G06F 16/22(2019.01) (54)发明名称 一种海量数据存 储方法以及装置、 存 储介质 (57)摘要 本申请提出一种海量数据存储 方法, 包括在 缓存数据库中根据日期一对一设置对应的流量 数据表, 获取实时运行数据; 将所述运行数据按 照关系型数据存储方式存储在与所述运行数据 产生的日期 对应的流量数据表中; 获取第一实时 时刻; 当所述第一实时时刻与所述第一预设时间 相同时; 对于任一所述流量数据表; 若所述第一 实时时刻对应的日期与任一所述流量数据表对 应的日期的差值大于预设时间差值时, 将对应的 所述流量数据表从缓存数据库转存至分布式数 据库。 本发 明可以解决单表存储有存储数据量瓶 颈限制的技 术问题。 权利要求书2页 说明书7页 附图1页 CN 115455015 A 2022.12.09 CN 115455015 A 1.一种海量数据存 储方法, 其特 征在于, 所述海量数据存 储方法包括: 在缓存数据库中根据日期一对一设置对应的流 量数据表; 获取实时运行 数据; 将所述运行数据按照关系型数据存储方式存储在与所述运行数据产生的日期对应的 流量数据表中; 获取第一实时 时刻; 当所述第一实时时刻与所述第一预设时间相同时, 对于任一所述流量数据表, 若所述 第一实时时刻 对应的日期与任一所述流量数据表对应的日期的差值大于预设时间差值时, 将对应的所述流量数据表从缓存数据库转存至分布式数据库并删除缓存数据库中的所述 流量数据表。 2.根据权利要求1所述的海量数据存储方法, 其特征在于, 所述将对应的所述流量数据 表从缓存数据库转存至分布式数据库的步骤之后还 包括: 实时跟进所述 流量数据表转存至分布式数据库的进度; 当所述分布式数据库的所述流量数据表的存储大小与所述缓存数据库的对应日期的 所述流量数据表的存 储大小相同时, 确认转存完成; 删除所述缓存数据库中存 储的所述 流量数据表。 3.根据权利要求1所述的海量数据存储方法, 其特征在于, 所述在缓存数据库中根据日 期一对一设置对应的流 量数据表的步骤 包括: 获取第二实时 时刻; 当所述第二实时 时刻与所述第二预设时间相同时; 依次遍历缓存数据库中的每一所述 流量数据表; 当存在预设数量的所述流量数据表, 且所述流量数据表所对应的日期与当前 日期的多 个第一时间差值依次排列后满足第一预设条件时, 确定数据存储所需流量数据表已经全部 建立。 4.根据权利要求3所述的海量数据存储方法, 其特征在于, 所述第 一预设条件为等差数 列且最大 数值与当前日期的差值小于第一预设值。 5.根据权利要求2所述的海量数据存储方法, 其特征在于, 所述海量数据存储方法还包 括: 获取第三实时 时刻; 当所述第三实时 时刻与所述第三预设时间相同时; 依次遍历缓存数据库中的每一所述 流量数据表; 当所述流量数据表所对应的日期与当前日期的第二时间差值超过第二预设时间差值 时, 确定存在过期的流 量数据表; 删除过期的所述 流量数据表。 6.根据权利要求2所述的海量数据存储方法, 其特征在于, 所述第 二预设时间与所述第 三预设时间相同。 7.根据权利要求4所述的海量数据存储方法, 其特征在于, 所述第一预设值为3 ‑7天中 任一数值。 8.一种海量数据存 储装置, 其特 征在于, 所述海量数据存 储装置包括:权 利 要 求 书 1/2 页 2 CN 115455015 A 2数据获取模块,用于获取实时运行数据以及第一实时时刻; 并将所述运行数据按照关 系型数据存储方式存 储在与所述 运行数据日期对应的流 量数据表中; 控制模块, 当所述第一实时时刻与所述第一预设时间相同时; 对于任一所述流量数据 表; 若所述第一 实时时刻 对应的日期与任一所述流量数据 表对应的日期的差值大于预设时 间差值时, 将对应的所述 流量数据表从 缓存数据库转存至分布式数据库。 9.一种存储介质, 其特征在于, 其特征在于, 所述计算机程序被处理器执行时, 使得所 述处理器执行如权利要求1 ‑8任一项所述的海量数据存 储方法。 10.一种海量数据存储装置, 其特征在于, 包括存储器和 处理器, 所述存储器存储有计 算机程序, 所述计算机程序被所述处理器执行时, 使得所述处理器执行如权利要求1至7中 任一项所述的海量数据存 储方法的步骤。权 利 要 求 书 2/2 页 3 CN 115455015 A 3

PDF文档 专利 一种海量数据存储方法以及装置、存储介质

文档预览
中文文档 11 页 50 下载 1000 浏览 0 评论 0 收藏 3.0分
温馨提示:本文档共11页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 一种海量数据存储方法以及装置、存储介质 第 1 页 专利 一种海量数据存储方法以及装置、存储介质 第 2 页 专利 一种海量数据存储方法以及装置、存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 SC 于 2024-02-07 12:40:02上传分享
友情链接
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。