云数据|国防科技大学王意洁教授团队云际存储算法上线( 三 )


(4)利用存储增量与合成备份技术 , 极大的提高了数据备份的效率 , 减轻网络负担 。
(5)基于AES256加密及全链路数据校验并且利用数据隔离管理提高数据管理的安全性 。

头歌云际容灾系统部署于UCloud的3个云数据中心上(分别位于上海、广州、北京) 。 为了检验头歌云际容灾系统的性能 , 团队在云际环境中将头歌云际容灾系统与市面上主流的系统做了实验对比 , 头歌云际容灾系统存在以下优势:
速度更快
基于纠删码的存储系统相比(Hadoop3.0 RS WAS LRC Facebook Xorbas) , 头歌云际备份系统将写入速度平均提高1.6倍、单点修复速度平均提高58%、单云修复速度平均提高28% 。

容错性更高
与基于多副本技术的云际容灾系统相比(此处为3副本技术) , 编码参数设置为(1264)的头歌云际备份系统可将冗余度减少1/2、容错性提高1/2、单点修复速度提高83.4%。 同时 , 二者写返回速度相近 。

更丰富且可靠的数据支持
头歌大文件云际备份系统支持数据迁移 , 实时数据订阅及实时同步等多种数据创术方式 , 提供更丰富、高性能、高可靠的数据传输与存储服务 。

当系统底层集群内任何一个节点宕机或发生故障 , 控制中心都能够将这个节点上的所有任务秒级切换到其他节点上 , 链路稳定性高达 99.99% 。 数据传输服务内部对部分传输链路提供 7×24 小时的数据准确性校验 , 快速发现并纠正传输数据 , 保证业务数据的存储与传输数据的可靠性 。
目前 , 云际计算研究团队基于头歌实践教学、医疗大数据、跨领域征信等领域开展了大规模应用示范 , 取得了一系列学术和产业应用创新 , 并产生显著效益 。 相关成果已发表在ICDCS、INFOCOM、TPDS、ITJ等国际顶级学术会议和知名期刊 。
参考文献
[1
王怀民 史佩昌张一鸣 . JointCloud: A Cross-Cloud Cooperation Architecture for Integrated Internet Service Customization[C
// 2017 IEEE 37th International Conference on Distributed Computing Systems (ICDCS). IEEE 2017.
[2
王意洁 , 裴晓强 , 马行空 , 许方亮 , TA-Update: An Adaptive Update Scheme with Tree-Structured Transmission in Erasure-Coded Storage Systems , IEEE Transactions on Parallel and Distributed Systems(TPDS) , 2018 , 29(8):1893-1906 , DOI:10.1109/TPDS.2017.2717981.
[3
裴晓强 , 王意洁 , 马行空 , 许方亮 , T-Update: A Tree-structured Update Scheme with Top-Down Transmission in Erasure-coded Systems , The 35th Annual IEEE International Conference on Computer Communications(IEEE INFOCOM 2016) , 10-15 April , 2016 , San Francisco , CA , USA , pp.154-162.
[4
包涵 , 王意洁 , 许方亮 , 基于生成矩阵变换的跨云纠删码写入方法 , 计算机研究与发展 , 2020 , 第57卷(第2期):291-305 , DOI:10.7544/issn1000-1239.2020.20190542
[5
包涵 , 王意洁 , 许方亮 , An Adaptive Erasure Code for JointCloud Storage of Internet of Things Big Data , IEEE Internet of Things Journal , 2020 , 7(3):1613–1624 , DOI:10.1109/JIOT.2019.2947720