安全公司报告
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210879787.8 (22)申请日 2022.07.25 (71)申请人 济南浪潮数据技 术有限公司 地址 250101 山东省济南市自由贸易试验 区济南片区浪潮路1036号 浪潮科技园 S05楼S311室 (72)发明人 侯满  (74)专利代理 机构 北京集佳知识产权代理有限 公司 11227 专利代理师 李宏志 (51)Int.Cl. G06F 9/50(2006.01) G06F 16/22(2019.01) G06F 16/2458(2019.01) (54)发明名称 一种分片数据的索引加载方法、 装置以及介 质 (57)摘要 本申请公开了一种分片数据的索引加载方 法、 装置以及介质, 应用于 数据检索领域。 该方法 先获取节 点的内存资源状态, 在节 点加载分片数 据时根据内存资源状态判断节点的内存是否满 足使用需求。 因为分片数据的索引加载进内存能 够提高检索的速率, 但是相应的会消耗内存资 源, 为了避免内存占用过多而导致节点无法运 行, 则在节 点的内存满足使用需求时将当前的分 片数据的索引加载进内存; 在节 点的内存不满足 使用需求时, 说明节点内存不能再存入索引, 因 此, 将剩余的分片数据的索引保存在磁盘。 本申 请在内存资源不足时将剩余分片数据对应的索 引保存在磁盘中, 牺牲部分查询效率以保证节点 的稳定运行。 权利要求书2页 说明书10页 附图2页 CN 115129476 A 2022.09.30 CN 115129476 A 1.一种分片数据的索引加载 方法, 其特 征在于, 包括: 获取节点的内存资源状态; 在所述节点加载分片数据时根据所述内存资源状态判断所述节点的内存是否满足使 用需求; 若所述节点的内存 满足所述使用需求, 则将当前的所述分片数据的索引加载进内存; 若所述节点的内存不满足所述使用需求, 则将剩余的所述分片数据的索引保存在磁 盘。 2.根据权利要求1所述的分片数据的索引加载方法, 其特征在于, 加载所述分片数据包 括: 获取各所述分片数据的指标参数; 根据所述指标参数确定出 各所述分片数据的优先级; 按优先级的高低顺序依次对各 所述分片数据的索引进行加载。 3.根据权利要求1所述的分片数据的索引加载方法, 其特征在于, 所述内存资源状态包 括: 堆内内存资源状态和堆外内存资源状态; 所述堆内内存资源状态包括堆内可用空间、 堆内已用空间、 堆内可回收空间、 堆内常驻 使用、 读写占用缓存; 所述 堆外内存资源状态包括 堆外可用空间和堆外已用空间。 4.根据权利要求2所述的分片数据的索引加载 方法, 其特 征在于, 所述指标参数包括: 所述分片数据的大小、 所述分片数据被检索的频率、 查询结果的数据量大小、 所述分片 数据的增长率。 5.根据权利要求1至4任意一项所述的分片数据的索引加载方法, 其特征在于, 所述节 点的内存不满足所述使用需求包括: 所述节点的可用内存空间小于内存阈值。 6.根据权利要求5所述的分片数据的索引加载 方法, 其特 征在于, 还 包括: 在满足刷新条件时对所述节点的内存进行刷新以清除无效数据。 7.根据权利要求6所述的分片数据的索引加载方法, 其特征在于, 所述刷新条件包括以 下至少之一: 所述节点的可用内存空间小于所述内存阈值; 各所述分片数据进行加载之前; 每隔预设时长 。 8.一种分片数据的索引加载装置, 其特 征在于, 包括: 获取模块, 用于获取节点的内存资源状态; 判断模块, 用于在所述节点加载分片数据时根据 所述内存资源状态判断所述节点的内 存是否满足使用需求; 若是, 则触发加载模块, 若否, 则触发保存 模块; 所述加载模块, 用于将当前的所述分片数据的索引加载进内存; 所述保存 模块, 用于将剩余的所述分片数据的索引保存在磁 盘。 9.一种分片数据的索引加载装置, 其特 征在于, 包括存 储器, 用于存 储计算机程序; 处理器, 用于执行所述计算机程序时实现如权利要求1至7任一项所述的分片数据的索 引加载方法的步骤。 10.一种计算机可读存储介质, 其特征在于, 所述计算机可读存储介质上存储有计算机权 利 要 求 书 1/2 页 2 CN 115129476 A 2程序, 所述计算机程序被处理器执行时实现如权利要求 1至7任一项 所述的分片数据的索引 加载方法的步骤。权 利 要 求 书 2/2 页 3 CN 115129476 A 3

.PDF文档 专利 一种分片数据的索引加载方法、装置以及介质

文档预览
中文文档 15 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共15页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 一种分片数据的索引加载方法、装置以及介质 第 1 页 专利 一种分片数据的索引加载方法、装置以及介质 第 2 页 专利 一种分片数据的索引加载方法、装置以及介质 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-18 13:26:21上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。