每天产生这么多的视频,头条的存储服务器得多大空间?会不会有存储极限
问题:每天产生这么多的视频,头条的存储服务器得多大空间?会不会有存储极限?
回答:今日头条系的服务器,2018年的时候已经超过了17万台了,2019年或者是2020年肯定是更加高。
庞大的数据中心
大型的互联网企业例如阿里、腾讯、今日头条等企业都是采用分布式的数据中心。这些数据中心可以分布在不同的城市。例如阿里就在贵州等不同的城市都有数据中心的分布。
而且,越是大型的企业就会购买越多的服务器,并且兴起更多的数据中心,第一个是因为他们需求很多的数据中心来满足企业和用户的需求;第二个是因为他们还会做备份和后备的,一旦一个数据中心出现问题就会在几毫秒之内自动切换到另外一个数据中心,保持企业运转。
所以,他们有数十万甚至更多的服务器也是正常的。
分布式的设计
理论上即使是分布式的设计,都会存在极限的。但是这个极限非常大,几乎没有可能达到。
你要知道,他们采用分布式的数据中心设计,可以根据需求,兴建数据中心,然后购买服务器并且重新它的数据中心,能够大规模的横向增加服务器,只有成本能够承受得起就不用担心服务器不够用的问题。
甚至有一些企业,例如百度、阿里、腾讯、华为这些甚至还会卖云服务,他们拥有大量的云资源可以给小企业使用。
很高兴回答你的问题我是林创云小编,如果我的回答对你有帮助欢迎给我评论留言或者点赞加个关注!
像这种资讯巨头公司,存储数据都是用成千上万个超大规模的存储集群再加上一系列复杂的技术整合的一整套系统,不存在容量不够,都是弹性伸缩。
今日头条使用MySQL或Mongo持久化存储+Memched(Redis),分了很多库(一个大内存库),亦尝试使用了SSD的产品。
今日头条的图片存储,都是直接把地址放在数据库中,分布式保存文件,读取的时候采用CDN调取。
B,KB、MB、GB、TB、PB、EB、ZB、YB、BB
依次每一个单位之间的差距是2的10次方倍 也就是1024倍
预计2020年全球总数据量为40ZB
换算成TB是2^30TB 约为10亿TB
目前商用数据密度较高的存储介质是固态硬盘/u盘
咱们看一下2T的存储大概有多重
2T=24g,那么就很好算出
2^30/2*24/1000/1000=12884(吨)
淘宝、今日头条等这些互联网公司,大部分采用了分布式存储方案,存储空间可以弹性增加,自由扩展,可以说没有存储的极限。在介绍分布式存储之前,首先说一说集中存储。
一个中小型公司,大部分采用了集中存储方式,也就是整个存储集中到一个系统中,为了增加系统的可靠性,可能采用了两地三中心的备份方案。集中存储并不是一个独立的设备,而是集中到一套系统中的多个设备。
集中存储的架构
集中存储包含了很多组件,比如控制器、磁盘阵列、交换机等,还有管理设备等辅助设备,下图显示了一个集中式存储的基本逻辑图。
集中存储的核心部件是机头,包含了两个控制器,互为备份,避免硬件故障导致整个存储系统不可用。控制器分为前端端口和后端端口,前端端口为服务器提供存储服务,后端端口用户扩充存储容量,后端端口连接存储设备,形成一个非常大的存储资源池。
抖音服务器储存空间多大
抖音服务器容量大约在42万台左右。
具体介绍
2018 年,字节跳动自己建设了数据中心,最大的数据中心在河北怀来官厅湖新媒体产业园,一期 5 万台服务器,二期 9 万台服务器