【金猿技术展】基于分布式拷贝的大数据备份系统及方法——计算机容灾备份技术

文章预览

‍ 英方软件技术 该 技术由 英方软件投 递并参与“ 数据猿年度金猿策划活动 ——2024大数据产业年度创新技术突破榜单及奖项”评选。 大数据产业创新服务媒体 ——聚焦数据 · 改变商业 本发明公开了一种基于分布式拷贝的大数据备份系统及方法，该系统包括：HADOOP集群，部署HJOB模块，通过HJOB模块与灾备机交互获取文件状态主表，在接收到备份/恢复指令时，根据文件状态主表生成待备份/待恢复文件状态列表，启动并划分 Mapper 任务，通过 Mapper 任务根据输入的待备份/待恢复文件状态列表中的文件项，向灾备机发送相应的备份文件或文件读取指令；灾备机，部署Node模块在接收到HADOOP集群节点传输的待备份文件的文件流数据后，通过第二File模块处理文件流写入灾备机，在接收到文件读取指令时，通过第二File模块读取文件流并发送给所述HADOOP集群 ………………………………