当前位置: 首页 > 创领中心 > 网络优化

一篇学会Hadoop3数据容错技术

  • 网络优化
  • 2024-11-15

RS-10-4-1024k:经常使用RS编码,每10个数据单元(cell),生成4个校验单元,共14个单元,也就是说:这14个单元中,只需有恣意的10个单元存在(不论是数据单元还是校验单元,只需总数=10),就可以获取原始数据。每个单元的大小是1024k=10241024=1048576。RS-3-2-1024k:经常使用RS编码,每3个数据单元,生成2个校验单元,共5个单元,也就是说:这5个单元中,只需有恣意的3个单元存在(不论是数据单元还是校验单元,只需总数=3),就可以获取原始数据。每个单元的大小是1024k=10241024=1048576。RS-6-3-1024k:经常使用RS编码,每6个数据单元,生成3个校验单元,共9个单元,也就是说:这9个单元中,只需有恣意的6个单元存在(不论是数据单元还是校验单元,只需总数=6),就可以获取原始数据。每个单元的大小是1024k=10241024=1048576。RS-LEGACY-6-3-1024k:战略和上方的RS-6-3-1024k一样,只是编码的算法用的是rs-legacy,应该是之前遗留的rs算法。XOR-2-1-1024k:经常使用XOR编码(速度比RS编码快),每2个数据单元,生成1个校验单元,共3个单元,也就是说:这3个单元中,只需有恣意的2个单元存在(不论是数据单元还是校验单元,只需总数=2),就可以获取原始数据。每个单元的大小是1024k=10241024=1048576。

  • 关注微信

本网站的文章部分内容可能来源于网络和网友发布,仅供大家学习与参考,如有侵权,请联系站长进行删除处理,不代表本网站立场,转载联系作者并注明出处:https://clwxseo.com/wangluoyouhua/6923.html

猜你喜欢

热门资讯

关注我们

微信公众号