全网唯一标准王
文库搜索
切换导航
文件分类
频道
文件分类
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211080818.X (22)申请日 2022.09.05 (71)申请人 北京金山云网络技 术有限公司 地址 100085 北京市海淀区西二 旗中路33 号院4号楼6层0 06号 (72)发明人 杜志豪 李学良 (74)专利代理 机构 北京华夏泰和知识产权代理 有限公司 1 1662 专利代理师 韩月玲 (51)Int.Cl. G06F 16/21(2019.01) G06F 16/22(2019.01) G06F 16/27(2019.01) (54)发明名称 集群间数据迁移的方法、 装置、 存储介质以 及电子设备 (57)摘要 本发明公开了一种集群间数据迁移的方法、 装置、 存储介质以及电子设备。 该方法包括: 查找 第一集群中待迁移数据的第一索引; 查找第一索 引的主分片; 对主分片和主分片 对应的存储路径 下的第一数据进行压缩, 得到压缩数据; 将压缩 数据采用断点续传的方式传输给第二集群; 对传 输到第二集群的压缩数据进行解压缩, 得到第一 数据与主分片; 将第一数据存储到第二集群中与 主分片对应的存储路径下。 本发 明解决了集群间 迁移数据效率低的技 术问题。 权利要求书2页 说明书11页 附图3页 CN 115408366 A 2022.11.29 CN 115408366 A 1.一种集群间数据迁移的方法, 其特 征在于, 包括: 查找第一 集群中待迁移数据的第一索引; 查找所述第一索引的主分片; 对所述主分片和所述主分片对应的存 储路径下的第一数据进行压缩, 得到 压缩数据; 将所述压缩数据采用断点 续传的方式传输给第二 集群; 对传输到所述第二集群的所述压缩数据进行解压缩, 得到所述第一数据与所述主分 片; 将所述第一数据存 储到所述第二 集群中与所述主分片对应的存 储路径下。 2.根据权利要求1所述的方法, 其特征在于, 所述查找第 一集群中待迁移数据的第 一索 引包括: 将所述待迁移数据的所有索引中, 索引 状态为关闭的索引的索引 状态调整为打开, 其 中, 所述索引状态为关闭的索引禁止读写; 将所述所有索引中, 每一个所述索引状态为打开的索引作为 一个所述第一索引。 3.根据权利要求2所述的方法, 其特征在于, 所述对所述主分片和所述主分片对应的存 储路径下的第一数据进行压缩, 得到 压缩数据包括: 将每一个所述第一索引作为当前索引, 将所述当前索引的主分片和所述当前索引的所 述主分片对应的存 储路径下的所述第一数据压缩为 一个压缩数据包。 4.根据权利要求1所述的方法, 其特征在于, 所述将所述压缩数据采用断点续传的方式 传输给第二 集群包括: 确定所述压缩数据在所述第一 集群中所在的第一 集群服务器; 在所述第二 集群中确定与所述第一 集群服务器映射的第二 集群服务器; 将所述压缩数据从所述第一集群服务器采用断点续传的方式迁移到所述第二集群服 务器。 5.根据权利要求4所述的方法, 其特征在于, 所述在所述第 二集群中确定与 所述第一集 群服务器映射的第二 集群服务器包括: 为每一个第一集群服务器在所述第二集群中确定出一个集群服务器作为所述第二集 群服务器; 或者 在所述第二 集群中确定出1个集群服 务器作为所述第二 集群服务器。 6.根据权利要求1所述的方法, 其特征在于, 所述将所述压缩数据采用断点续传的方式 传输给第二 集群包括: 将所述压缩数据划分为多个部分; 将所述多个部分中的每一个部分按照 顺序传输到所述第 二集群中; 在所述压缩数据中 的当前部 分传输失败的情况下, 在再次传输所述压缩数据时, 从所述压缩数据的当前部 分, 继续向所述第二 集群传输所述压缩数据。 7.根据权利要求1至6任意一项所述的方法, 其特征在于, 在将所述待迁移数据存储到 所述第二 集群中与所述主分片对应的存 储路径下之后, 所述方法还 包括: 删除所述主分片的状态目录; 在删除所述状态目录成功的情况下, 调用加载接口将所述第 一索引刷新到所述第 二集 群中。权 利 要 求 书 1/2 页 2 CN 115408366 A 28.一种集群间数据迁移的装置, 其特 征在于, 包括: 第一查找模块, 用于查找第一 集群中待迁移数据的第一索引; 第二查找模块, 用于查找所述第一索引的主分片; 压缩模块, 用于对所述主分片和所述主分片对应的存储路径下的第一数据进行压缩, 得到压缩数据; 传输模块, 用于将所述压缩数据采用断点 续传的方式传输给第二 集群; 解压缩模块, 用于对传输到所述第二集群的所述压缩数据进行解压缩, 得到所述第一 数据; 存储模块, 用于将所述第 一数据存储到所述第 二集群中与所述主分片对应的存储路径 下。 9.一种计算机可读的存储介质, 所述计算机可读的存储介质存储有计算机程序, 其特 征在于, 所述计算机程序被处 理器运行时执 行所述权利要求1至7任一项中所述的方法。 10.一种电子设备, 包括存储器和 处理器, 其特征在于, 所述存储器中存储有计算机程 序, 所述处理器被设置为通过所述计算机程序执行所述权利要求1至7任一项中所述的方 法。权 利 要 求 书 2/2 页 3 CN 115408366 A 3
专利 集群间数据迁移的方法、装置、存储介质以及电子设备
文档预览
中文文档
17 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
赞助2元下载(无需注册)
温馨提示:本文档共17页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2元下载
本文档由 人生无常 于
2024-03-18 00:51:04
上传分享
举报
下载
原文档
(570.6 KB)
分享
友情链接
ISO-IEC 18004 2024 Information technology - Automatic identification and data capture techniques - QR code bar code symbology specification.pdf
ISO 893 1989 Surface active agents — Technical alkane sulfonates — Methods of analysis.pdf
ISO 16745-2 2017 Sustainability in buildings and civil engineering works — Carbon metric of an existing building during use stage — Part 2 Verification.pdf
ISO 10075-1 2017 Ergonomic principles related to mental workload Part 1 General issues and concepts terms and definitions.pdf
ISO 30007 2010 Ships and marine technology — Measures to prevent asbestos emission and exposure during ship recycling.pdf
ISO 11452-5 2002 Road vehicles — Component test methods for electrical disturbances from narrowband radiated electromagnetic energy — Part 5 Stripline.pdf
ISO IEC 19086-3-2017 Information technology Cloud computing Service level agreement (SLA) framework Part 3 Core conformance requirements.pdf
ISO 14527-2 1999 Plastics — Urea-formaldehyde and ure melamine-formaldehyde powder moulding compounds (UF- and UF.pdf
ISO 10320 2019 Geosynthetics — Identification on site.pdf
ISO 16065-2 2014 Pulps — Determination of fibre length by automated optical analysis — Part 2 Unpolarized light method.pdf
GB-T 30445-2013 在职人员评估服务 服务提供者要求.pdf
GB-T 6572-2014 土方机械 液压挖掘机 术语和商业规格.pdf
GB-T 12604.1-2020 无损检测 术语 超声检测.pdf
GB-T 19797-2012 农业灌溉设备 中心支轴式和平移式喷灌机 水量分布均匀度的测定.pdf
GB-T 37421-2019 热喷涂 热喷涂涂层的表征和试验.pdf
GB-T 35138-2017 封闭管道中流体流量的测量 渡越时间法液体超声流量计.pdf
GB-T 35746-2017 船舶与海上技术 船桥布置及相关设备 要求和指南.pdf
GB-T 6284-2006 化工产品中水分测定的通用方法 干燥减量法.pdf
GB-T 25686-2018 土方机械 司机遥控装置的安全要求.pdf
GB-Z 43414-2023 无损检测 无损检测培训大纲.pdf
1
/
3
17
评价文档
赞助2元 点击下载(570.6 KB)
回到顶部
×
微信扫码支付
2
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。