文档名:分布式存储模式下的数据错误检测方法综述
摘要:数据错误检测是数据质量保证的重要环节,直接关系到数据全生命周期分析结果的可信度.随着云边端数据中心架构应用领域及范围的逐渐扩大,以及网络节点存储计算能力的提升,数据分布式本地存储日益普遍,传统数据集中式存储模式下的数据错误检测方法难以适应数据分布式存储模式.基于此,开展分布式存储模式下的数据错误检测方法综述,在数据错误检测问题描述与分类基础上,从技术原理、模型方法、主要进展等角度,对基于传统分布式学习的数据错误检测方法、基于联邦学习框架的数据错误检测方法进行总结分析,比较了二者之间的区别及联系,并展望提出领域相关潜在研究机会及关注问题,为开展分布式存储模式下的数据错误检测及相关研究提供借鉴和参考.
Abstract:Dataerrordetectionisanimportantpartofdataqualityassurance,whichisdirectlyrelatedtothereliabilityofdatalifecycleanalysisresults.Withthegradualexpansionoftheapplicationfieldandscopeofthecloud-edgedatacenterarchitecture,andtheimprovementofthestorageandcomputingpow-erofnetworknodes,distributedlocalstorageofdataisbecomingmoreandmorecommon.Thedataerrordetectionmethodunderthetraditionaldatacentralizedstoragemodeisdifficulttoadapttothedatadis-tributedstoragemode.Basedonthis,thispapercarriesoutasurveyofdataerrordetectionmethodsindistributedstoragemode.Onthebasisofthedescriptionandclassificationofdataerrordetectionprob-lems,thispapersummarizesandanalyzesdataerrordetectionmethodsbasedontraditionaldistributedlearninganddataerrordetectionmethodsonaccountoffederatedlearningframeworkfromtheperspec-tivesoftechnicalprinciples,modelmethodsandmainprogress.Thedifferencesandconnectionsbetweenthemarecompared,andthepotentialresearchopportunitiesandconcernsinthefieldareprospected.Thispaperprovidesreferencefordataerrordetectionandrelatedresearchindistributedstoragemode.
作者:范帅 李晓军 姚俊萍 王印铭Author:FANShuai LIXiao-jun YAOJun-ping WANGYin-ming
作者单位:火箭军工程大学,陕西西安710025
刊名:中国电子科学研究院学报
Journal:JournalofChinaAcademyofElectronicsandInformationTechnology
年,卷(期):2024, 19(3)
分类号:TP391
关键词:分布式存储 数据错误检测 传统机器学习 联邦学习
Keywords:DistributedStorage DataErrorDetection TraditionalMachineLearning FederatedLearning
机标分类号:TP391P208TP181
在线出版日期:2024年7月2日
基金项目:国家社会科学基金分布式存储模式下的数据错误检测方法综述[
期刊论文] 中国电子科学研究院学报--2024, 19(3)范帅 李晓军 姚俊萍 王印铭数据错误检测是数据质量保证的重要环节,直接关系到数据全生命周期分析结果的可信度.随着云边端数据中心架构应用领域及范围的逐渐扩大,以及网络节点存储计算能力的提升,数据分布式本地存储日益普遍,传统数据集中式存储...参考文献和引证文献
参考文献
引证文献
本文读者也读过
相似文献
相关博文
分布式存储模式下的数据错误检测方法综述 Review on Data Error Detection Methods in Distributed Storage Mode
分布式存储模式下的数据错误检测方法综述.pdf
- 文件大小:
- 25.58 MB
- 下载次数:
- 60
-
高速下载
|