阿壮博客阿壮博客阿壮博客

数据压缩比<span> 数据压缩比计算公式

数据压缩比为衡量数据压缩器压缩效率的质量指标。是指数据被压缩的比例。

中文名:数据压缩比

外文名:data compression ratio

适用领域:计算机

性质:质量指标

计算方法

按存储容量规划针对不同的数据存储形式(Text,ORC,Hyperbase,ES等),分别计算所需的存储空间,总和即为存储数据需要的总存储空间。存储计算公式(HDFS默认3副本;ES默认2倍膨胀率、1副本):Text数据量×(副本数+临时存储)×冗余(1.2)ORC数据量×(副本数+临时存储)×压缩比(1:5)×冗余(1.2)Hyperbase数据量×(副本数+临时存储)×压缩比(1:3)×冗余(1.3)+索引数据量×副本数×压缩比(1:3)ES数据量×膨胀率×(1+副本数)

注意

:ES的副本概念与HDFS不同,ES的副本指原始数据的额外副本数据,即1副本表示共有1(原始数据)+1(副本数据)=2份数据;HDFS的副本数即为数据保存的份数,即3副本表示共有3份数据。

非结构化数据(文档、图片、音视频等)分两种情况,一种是把这些存到hbase的lob index里,这个按照hbase的计算第二种情况是直接放到hdfs上那就是大小*副本数。

参考资料

1.数据压缩比·911查询

1.文章《数据压缩比<span> 数据压缩比计算公式》援引自互联网,仅供学习和研究使用,内容仅代表作者本人观点,与本网站无关,侵删举报等反馈请点击此处

2.文章《数据压缩比<span> 数据压缩比计算公式》仅供读者参考,本网站未对该内容进行证实,对其原创性、真实性、完整性、及时性不作任何保证。

3.文章转载时请保留本站内容来源地址,https://100248.com/wen/487184.html

相关推荐

奋进新时代踏上新征程作文 启航新征程,奋进新时代作文

2022年奋进新时代踏上新征程作文9篇从作文的写作命题来分,作文可以分为命题作文和非命题作文。命题作文,一般是指出题者给出一个既定的题目,要

有趣的万圣节活动作文 有趣的活动作文500字以上

有趣的万圣节活动作文5篇作为一名合格的学生,对于自己的万圣节活动内容,可以书写作文进行描写记录。相信,很多朋友都对写作文感到非常苦恼吧,下面

万圣节快乐优质作文 快乐的万圣节作文

万圣节快乐优质作文7篇关于万圣节的到来,对于这一天的节日文化,可以书写作文记录自己的个人感想。那么,写作文时还应注意哪些问题呢?下面是由小编

万圣节活动推文怎么写 校园活动推文怎么写

万圣节活动推文怎么写5篇作为一名学生,对于自己的万圣节活动,应该书写作文记录下来。作文的事项有许多,那么,你确定会写吗?下面是由小编给大家带

万圣节的节日作文 万圣节是什么节日?

万圣节的节日作文7篇对于万圣节的节日文化,为了进一步进行了解,可以结合实际书写一篇作文。相信,很多朋友都对写作文感到非常苦恼吧,下面是由小编

有趣的万圣节作文评析 有趣的万圣节作文400字

有趣的万圣节作文评析5篇对于万圣节活动的开展,为了能够深入了解万圣节文化,因此需要书写一篇万圣节话题作文。那么,写作文时还应注意哪些问题呢?

感恩节的来历和意义简短 感恩节的来历和意义英文

感恩节的来历和意义简短7篇为了记录感恩节的活动经历,可以选择书写作文的方式,以此进行认识。那么,你有了解过作文吗?下面是由小编给大家带来的感

万圣节主题文章内容 文章内容切合主题

万圣节主题文章内容7篇对于万圣节的到来,每一个人都有自己的庆祝方式,为了了解这个节日的关联,可以书写作文进行探索。那么,写作文时还应注意哪些