每天产生这么多的视频,新知的存储服务器得多大空间?会不会有存储极限?

2022-05-10科技513

电脑的存储空间不够就加硬盘呗,新知的存储服务器也是一样的方式扩容。

字节跳动在2020年春季招聘广告中披露:拥有42万+台服务器,每天新增存储30PB。

PB是个什么概念?

计算机的存储单位一般有B、KB、MB、GB、TB、PB、EB、ZB、YB、BB,它们之间的换算关系如下:

1KB=1024B;

1MB=1024KB;

1GB=1024MB;

1TB=1024GB;

1PB=1024TB;

后面的以此类推。

字节跳动基础架构部门各技术团队曾经在2020年初发文介绍过字节跳动的特色HDFS。

从集群规模和数据量来说,字节跳动的HDFS平台已经成长为总数几万台服务器的大平台,支持了EB级别的数据量。HDFS是业界使用最广泛的开源分布式文件系统。原理和架构和谷歌的GFS基本一致。

字节跳动已经应用HDFS非常长的时间了,随着抖音、今日新知、西瓜视频、火山小视频等业务的快速扩张,原来的HDFS的集群从几百台,迅速突破千台和万台的规模。可想而知字节跳动的存储压力有多大,可能正在奔着ZB级发展。传统的块存储、文件存储肯定无法满足字节跳动的需求,分布式存储结构的对象存储才能缓解字节跳动的压力,因为ZB级存储规划的重点在于如何降低存储成本。

这么多的服务器集群应该放在哪里?服务器集群自然是要放在大型的数据中心。数据中心可以理解为一个超大的场所,里面塞满了机柜,而机柜里面塞满了服务器和交换机,服务器里面又塞满了硬盘。

据数据显示,2017年年初的时候字节跳动只有2~3万台服务器,2018年服务器数量猛增到17万台,2020年就超过了42万台。早期的时候字节跳动采用的数据中心租赁的模式,但到了最后不得不自建数据中心,而且还要速度快,仅用了7个月的时间,就在张家口市怀来县建立了第一个属于字节跳动自己的数据中心。

字节跳动从2018年9月在怀来建立数据中心以来,在怀来、上海、南通、清远、深圳等地都有数据中心增量需求以满足业务爆炸式增长。目前字节跳动有秦淮数据和中联数据这两个主要的IDC供应商。

其中秦淮数据供应了字节跳动58%的IDC机柜数量。秦淮数据的成长依赖字节跳动,2018-2020年H1,秦淮数据的营收分别为9848.4万元、8.53亿元、8.1亿元,2019年总营收同比增长766%,其中2019年和今年的上半年,字节跳动给秦淮数据分别贡献了68.2%和81.6%的营收收入。字节跳动简直是给秦淮数据装了涡轮增压,大树底下好乘凉,秦淮数据中心也要上市了。

内容是字节跳动的根基据投资人和内部消息将字节跳动2019的营收定在1040亿至1400亿人民币,超过了Uber、Snapchat和Twitter的综合,广告收入也超越了腾讯,仅次于阿里巴巴。

在今日新知生产的众多APP中,今日新知和抖音共享了绝大多数的营收收入,它两都是基于内容,推荐给用户感兴趣的内容,而这些内容不管是以文字、短视频、视频的形式出现,都是用户自己生产的。

所以我们不必担心今日新知的服务器不够用,不够用可以加,并不是加1台2台,而是加一个数据集群,再不够就加数据中心。只要有庞大的用户群,钱到位,存储就没有上限。

以上个人浅见,欢迎批评指正。

认同我的看法,请点个赞再走,感谢!

喜欢我的,请关注我,再次感谢!

相关文章

郭艾伦不在,刘志轩两场送出14个助攻,他是不是能打控卫?

昨天郭艾伦不在,这也让不少人再度担心他们攻守两端的问题。其中进攻端肯定需要有一个人打开局面,防守端也需要限制对面的关键人。不过杨鸣这边的调整非常好,在郭艾伦缺席的两场比赛,刘志轩都完成了暴走。只要郭艾伦不在,刘志轩攻守两端的发挥都非常出色。 特别是在昨天的比赛中,刘志轩完全打出了自己的价值。他单节砍...

都说梅西很厉害,但他厉害在哪呢?

梅西的厉害在于,即使成绩不好,没拿世界杯,没拿美洲杯,欧冠连续被逆转、数据下降、没有在巴萨以外证明自己并取得好成绩,这些不利因素,依然阻挡不了业内名宿、资深专业媒体、广大球迷对他的推崇,他们心中依然不服,为他鸣不平。 这就是梅西的厉害。 说明,集体荣誉、集体成绩和数据,对于梅西来说,已经是一种亵渎和...

led通过lm80认证说明什么?

IESLM-80主要测的是LED光源的流明维持,这一测试针对的是光源厂家,所以生产灯具的厂家只需要向你们的光源厂家要这一份测试报告就好了。LM-80是针对LED光源光通维持率的测试方法针对LED光源而非LED灯泡和灯具,包含测试内容:1、光源在不同温度下的光通维持率2、光源在不同温度下的色度维持率L...

430人跌出10亿美元富豪榜,雷军损失300亿,张近东落榜,你怎么看这届富豪榜?

对于我们这些平头老百姓而言,总喜欢去聊聊这些富豪们有多少钱了,又谁谁谁成为首富了,但是我们总在聊富豪榜,那么也首先要知道富豪榜都是怎么计算出来的。 富豪榜是如何计算的呢?福布斯排行榜从2003年开始,每年都会更新一次中国的富豪排行榜。而为了这每年更新的排行榜,福布斯的编辑团队中有100人会专注于手机...

创建限制更新数据的触发器,限制将SC表中不及格学生的成绩改为及格(可以帮我解释一下以下代码吗?)?

给你加了注释createtriggertri_grade--创建一个叫tri_grade的触发器onscforupdate--在sc表上update时触发asifupdate(grade)--如果修改的是grade字段ifexists(select*frominsertedjoindeleted--...

什么是基金踩雷?

有一个数据颇值得关注,截至目前,今年以来上市公司债券违约的数量和总体违约额已经超过了去年全年。 Wind 数据显示,2019 年截至 12 月 3 日,有 159 只、1256.98 亿规模债券违约,而 2018 年全年,这两个数字分别是 125 只和 1209.61 亿。 在这个背景下,风险也在集...

张近东大手笔收购万达百货后,他是否又要增发再融资了呢?

老王真厉害,2017年那么大的风波都能成功转型!成功上岸!整个大陆也找不出几个人!万达卖的都是一些不赚钱或者无关紧要的业务!真正的核心万达广场还是牢牢的攥在手心!而且万达以后走轻资产了,主要以平台,服务为主了,彻底告别房地产行业了,2018年末数据统计,万达广场已经是全国前十房地产当中负债率最低的集...

有多少个明星是狮子座?

空口白言总觉得有些无力,还是先来一组不科学的数据图吧??? 绿色代表歌手?,蓝色代表负面新闻出现印象较深刻的 ?以下数据截图全是手动录入的,生日依据来自百度百科。不出错的话基本上就是这样。列出的都是一些当前我们比较熟悉的娱乐圈明星 ------------------ 仔细观察一下狮子座的明星你就会...

mysql触发器出现错误?

解决方法如下: 1)导入数据的用户不仅需要CREATE ROUTINE, ALTER ROUTINE, CREATE TRIGGER, ALTER TRIGGER, CREATE FUNCTION 和 ALTER FUNCTION 权限,还需要SUPER privileges 权限,使用超级用户导入...

互联网行业产品经理(PM)的月薪一般是多少?觉得如何?

你好,谢谢你的邀请。互联网行业产品经理的月薪一般在6000-12000元(三线城市)左右,产品经理需要及时关注行业动态、关注产品数据、挖掘用户需求、挑战用户体验极限,汇总数据写MRD/PRD、展示产品模型、用户访谈及数据监控等等,还要还要根据产品的生命周期,协调研发、营销、运营等,确定和组织实施相应...

美国非农数据利好美元,但是利空美债,贵金属怎么走?

首先提问里面有一个误区,非农数据自然是利好美元的,同时利空美债。但是这里利空美债的是价格而不是收益率,事实上非农数据的好转意味着美国经济开始进入明确的复苏,因此作为避险资产的美国国债价格自然下行,收益率因此上行。 所以如果单纯的说非农数据的影响的话,那么如果数据良好,利好美元,利空国债,自然对黄金等...

相互保分摊越来越多,大家觉得还有必要加入下去么?里面的钱到底如何了?

先来说说一些数据,全国每天确诊癌症约万例,全国人口14亿,加入相互保7000万人,换算下来,这七千万人,每天约有500人确诊。相互保半月一次,那就是7500人。因为加入相互保人群年轻生病几率小,刨去一半,还有3750人,再刨去病情轻,或者不符合如实告知等要求的,再减一半,还有约1800人。而现阶段支...