>>分享SPSS,Hadoop等大数据处理技术,以及分布式架构以及集群系统的构建 书籍支持  卫琴直播  品书摘要  在线测试  资源下载  联系我们
发表一个新主题 开启一个新投票 回复文章 您是本文章第 23871 个阅读者 刷新本主题
 * 贴子主题:  大数据到底有多大 回复文章 点赞(0)  收藏  
作者:flybird    发表时间:2020-01-03 05:58:29     消息  查看  搜索  好友  邮件  复制  引用

我们传统的个人电脑,处理的数据,是GB/TB级别。例如,我们的硬盘,现在通常是1TB/2TB/4TB的容量。

TB、GB、MB、KB的关系,大家应该都很熟悉了:

1 KB = 1024 B (KB - kilobyte)

1 MB = 1024 KB (MB - megabyte)

1 GB = 1024 MB (GB - gigabyte)

1 TB = 1024 GB (TB - terabyte)

而大数据是什么级别呢?PB/EB级别。

大部分人都没听过。其实也就是继续翻1024倍:

1 PB = 1024 TB (PB - petabyte)

1 EB = 1024 PB (EB - exabyte)

只是看这几个字母的话,貌似不是很直观。我来举个例子吧。

1TB,只需要一块硬盘可以存储。容量大约是20万张照片或20万首MP3音乐,或者是671部《红楼梦》小说。



1PB,需要大约2个机柜的存储设备。容量大约是2亿张照片或2亿首MP3音乐。如果一个人不停地听这些音乐,可以听1900年。。。



2个机柜

1EB,需要大约2000个机柜的存储设备。如果并排放这些机柜,可以连绵1.2公里那么长。如果摆放在机房里,需要21个标准篮球场那么大的机房,才能放得下。

21个篮球场

阿里、百度、腾讯这样的互联网巨头,数据量据说已经接近EB级。

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

阿里数据中心内景

EB还不是最大的。目前全人类的数据量,是ZB级。

1 ZB = 1024 EB (ZB - zettabyte)

2011年,全球被创建和复制的数据总量是1.8ZB。

而到2020年,全球电子设备存储的数据,将达到35ZB。如果建一个机房来存储这些数据,那么,这个机房的面积将比42个鸟巢体育场还大。



数据量不仅大,增长还很快——每年增长50%。也就是说,每两年就会增长一倍。

目前的大数据应用,还没有达到ZB级,主要集中在PB/EB级别。

大数据的级别定位

1 KB = 1024 B (KB - kilobyte)

1 MB = 1024 KB (MB - megabyte)

1 GB = 1024 MB (GB - gigabyte)

1 TB = 1024 GB (TB - terabyte)

1 PB = 1024 TB (PB - petabyte)

1 EB = 1024 PB (EB - exabyte)

1 ZB = 1024 EB (ZB - zettabyte)




程序猿的技术大观园:www.javathinker.net

  Java面向对象编程-->多线程(上)
  JavaWeb开发-->JSP中使用JavaBean(Ⅱ)
  JSP与Hibernate开发-->通过JPA API检索数据
  Java网络编程-->XML数据处理
  精通Spring-->通过Vuex进行状态管理
  Vue3开发-->通过Axios访问服务器
  Redis服务器重要属性详解
  Spark学习之Redis
  基于spark-streaming实时推荐系统
  Spark RDD转换成DataFrame的两种方式
  Spark Thrift JDBCServer应用场景解析与实战案例
  Hadoop、Spark、HBase与Redis的适用性讨论(全文)-数据视野
  基于Spark MLlib平台的协同过滤算法---电影推荐系统
  通过Spark Streaming的foreachRDD把处理后的数据写入外部存储...
  SNMP 已死 - Streaming Telemetry 流遥测技术
  hadoop从零开始--HDFS篇
  Flume+Kafka+Storm+Redis构建大数据实时处理系统:实时统计网...
  超详细的Hadoop2配置详解
  云计算和大数据到底有什么关系
  大数据处理的基本流程
  大数据的处理技术
  更多...
 IPIP: 已设置保密
楼主      
1页 0条记录 当前第1
发表一个新主题 开启一个新投票 回复文章


中文版权所有: JavaThinker技术网站 Copyright 2016-2026 沪ICP备16029593号-2
荟萃Java程序员智慧的结晶,分享交流Java前沿技术。  联系我们
如有技术文章涉及侵权,请与本站管理员联系。