基于分层哈希编号的智能制造产线数据同步方法

TP309; 海量数据存储和同步是智能制造产线中的重要问题.当前数据同步的主流方法是远程同步(Remote synchronization,RSYNC)算法,采用同步增量数据的方法减少数据传输量.智能制造产线产生的数据层次结构深、目录结构复杂,导致同步时评估时间长.为此提出分层哈希编号算法进行同步,基于数据分层对数据文件编号,使用散列表记录层次信息,快速比对差异数据,并对不同类型的差异数据采用不同备份策略.实验结果表明,与标准RSYNC相比,该方法有效减少了RSYNC评估的数据量,有效降低了同步时间,提高了同步备份效率....

Full description

Saved in:
Bibliographic Details
Published in数据采集与处理 Vol. 35; no. 5; pp. 834 - 841
Main Authors 燕雪峰, 丁叶
Format Journal Article
LanguageChinese
Published 南京航空航天大学计算机科学与技术学院/人工智能学院,南京,211106 01.09.2020
Subjects
数据灾备
文件同步
分层哈希编号表
RSYNC
远程备份
Online AccessGet full text
ISSN1004-9037
DOI10.16337/j.1004-9037.2020.05.004

Cover

More Information
Summary:TP309; 海量数据存储和同步是智能制造产线中的重要问题.当前数据同步的主流方法是远程同步(Remote synchronization,RSYNC)算法,采用同步增量数据的方法减少数据传输量.智能制造产线产生的数据层次结构深、目录结构复杂,导致同步时评估时间长.为此提出分层哈希编号算法进行同步,基于数据分层对数据文件编号,使用散列表记录层次信息,快速比对差异数据,并对不同类型的差异数据采用不同备份策略.实验结果表明,与标准RSYNC相比,该方法有效减少了RSYNC评估的数据量,有效降低了同步时间,提高了同步备份效率.
ISSN:1004-9037
DOI:10.16337/j.1004-9037.2020.05.004