每天产生这么多的视频,新知的存储服务器得多大空间?会不会有存储极限?

2022-05-10科技470

电脑的存储空间不够就加硬盘呗,新知的存储服务器也是一样的方式扩容。

字节跳动在2020年春季招聘广告中披露:拥有42万+台服务器,每天新增存储30PB。

PB是个什么概念?

计算机的存储单位一般有B、KB、MB、GB、TB、PB、EB、ZB、YB、BB,它们之间的换算关系如下:

1KB=1024B;

1MB=1024KB;

1GB=1024MB;

1TB=1024GB;

1PB=1024TB;

后面的以此类推。

字节跳动基础架构部门各技术团队曾经在2020年初发文介绍过字节跳动的特色HDFS。

从集群规模和数据量来说,字节跳动的HDFS平台已经成长为总数几万台服务器的大平台,支持了EB级别的数据量。HDFS是业界使用最广泛的开源分布式文件系统。原理和架构和谷歌的GFS基本一致。

字节跳动已经应用HDFS非常长的时间了,随着抖音、今日新知、西瓜视频、火山小视频等业务的快速扩张,原来的HDFS的集群从几百台,迅速突破千台和万台的规模。可想而知字节跳动的存储压力有多大,可能正在奔着ZB级发展。传统的块存储、文件存储肯定无法满足字节跳动的需求,分布式存储结构的对象存储才能缓解字节跳动的压力,因为ZB级存储规划的重点在于如何降低存储成本。

这么多的服务器集群应该放在哪里?服务器集群自然是要放在大型的数据中心。数据中心可以理解为一个超大的场所,里面塞满了机柜,而机柜里面塞满了服务器和交换机,服务器里面又塞满了硬盘。

据数据显示,2017年年初的时候字节跳动只有2~3万台服务器,2018年服务器数量猛增到17万台,2020年就超过了42万台。早期的时候字节跳动采用的数据中心租赁的模式,但到了最后不得不自建数据中心,而且还要速度快,仅用了7个月的时间,就在张家口市怀来县建立了第一个属于字节跳动自己的数据中心。

字节跳动从2018年9月在怀来建立数据中心以来,在怀来、上海、南通、清远、深圳等地都有数据中心增量需求以满足业务爆炸式增长。目前字节跳动有秦淮数据和中联数据这两个主要的IDC供应商。

其中秦淮数据供应了字节跳动58%的IDC机柜数量。秦淮数据的成长依赖字节跳动,2018-2020年H1,秦淮数据的营收分别为9848.4万元、8.53亿元、8.1亿元,2019年总营收同比增长766%,其中2019年和今年的上半年,字节跳动给秦淮数据分别贡献了68.2%和81.6%的营收收入。字节跳动简直是给秦淮数据装了涡轮增压,大树底下好乘凉,秦淮数据中心也要上市了。

内容是字节跳动的根基据投资人和内部消息将字节跳动2019的营收定在1040亿至1400亿人民币,超过了Uber、Snapchat和Twitter的综合,广告收入也超越了腾讯,仅次于阿里巴巴。

在今日新知生产的众多APP中,今日新知和抖音共享了绝大多数的营收收入,它两都是基于内容,推荐给用户感兴趣的内容,而这些内容不管是以文字、短视频、视频的形式出现,都是用户自己生产的。

所以我们不必担心今日新知的服务器不够用,不够用可以加,并不是加1台2台,而是加一个数据集群,再不够就加数据中心。只要有庞大的用户群,钱到位,存储就没有上限。

以上个人浅见,欢迎批评指正。

认同我的看法,请点个赞再走,感谢!

喜欢我的,请关注我,再次感谢!

相关文章

我的世界幸运方块怎么做?

用指令 限制条件 仅限服务器管理员 第一次发布 1.8 (14w03a) 用特定方块全部或部分填充一个区域。 格式fill <x1> <y1> <z1> <x2> <y2> <z2> <方块名> [数据值] [旧...

430人跌出10亿美元富豪榜,雷军损失300亿,张近东落榜,你怎么看这届富豪榜?

对于我们这些平头老百姓而言,总喜欢去聊聊这些富豪们有多少钱了,又谁谁谁成为首富了,但是我们总在聊富豪榜,那么也首先要知道富豪榜都是怎么计算出来的。 富豪榜是如何计算的呢?福布斯排行榜从2003年开始,每年都会更新一次中国的富豪排行榜。而为了这每年更新的排行榜,福布斯的编辑团队中有100人会专注于手机...

创建限制更新数据的触发器,限制将SC表中不及格学生的成绩改为及格(可以帮我解释一下以下代码吗?)?

给你加了注释createtriggertri_grade--创建一个叫tri_grade的触发器onscforupdate--在sc表上update时触发asifupdate(grade)--如果修改的是grade字段ifexists(select*frominsertedjoindeleted--...

香港,北京,上海,广州,深圳加起来经济总量有多大?

北上广深港这五大城市,GDP加起来的话,也是非常庞大的一个规模了。根据2019年的数据,上海实现GDP38255亿元,北京实现35371亿元,深圳实现了26927亿元,广州实现了23628亿元,香港实现了2.52万亿人民币。 现在北京,上海,广州,深圳,香港都是我国非常发达的城市,也是我国GDP排名...

服务器是不是一定要备案?

服务器不一定要备案,这个需要根据你的需求来看是否需要备案。如果你购买一台阿里云或者是腾讯云服务器不需要通过域名来访问,直接使用IP地址是不需要备案的。你可以在服务器上部署各种服务,如:msyql、nginx、redis、tomcat等。 如果是用做企业或者个人网站要看服务器是国内服务器还是香港或者海...

家里宽带有公网ip想在家里弄一台服务器,有什么设备推荐?

感谢邀请!其实有了公网IP,其他都不是太难。不过如果按照运营商的尿性,每次宽带拨号你的公网IP是可能会变化的,未来也有可能给你分配私网的IP,所以你可能以后还是需要做一些穿越私网的处理。 如果你有了公网IP并且要做服务器,在家里有无线路由器做NAT的情况下,记得把家里的WIFI路由器配置NAT固定端...

web服务器是什么?

Web服务器有硬件服务器和软件服务器,现在硬件服务器多以云的方式为用户提供服务。 Apache、nginx属于软件服务器,软件服务器是架设在服务端为Web应用提供系统级支撑服务,除了题目中提到的两个服务器,还有微软的IIS服务器也有比较多的应用,可以说是目前应用最为广泛的三大服务器。 以下描述的是W...

什么是环球信息网?

的其他服务器对接。...

想玩免费的魔兽私服,人别太少跟单机似的,有哪些推荐?

介绍几个比较不错的吧,但是大部分都是国外的。国内的私服参次不齐,人数也不是很稳定。 一、N服。是法国的一个私服,版本是60年代的,非盈利公益服,不需要再买点卡了。服务器运营者花费基本都是wower的无偿捐助。再就是修复的比较好,BUG很少,人数也比较多。 二、E服。人数也比较多,分PVE和PVP服务...

“1兆”是否等于“1GB”?

按容量来算,1G等于1024M,相反,1M等于1/1024G,约等于0.001G。 计算机里的用法 1兆 就是1MB 信息字节学上,1兆字节 =1MB=1 048 576字节 (1字节=9.5367431640625*10-7兆字节) 1G等于1024MB ,1MB等于1024KB M就是英文Meg...

怎样申请健康通行码,健康通行码从哪里申请?

感谢邀请! 现在乘坐公共交通,或去外地一般需要两个码。健康码和健康通行码。 一般是在各省的微信公众号上可以申请。 也可以在微信上,点击“我”,进入“支付”,里面有防疫健康码。 健康通行码管理信息系统以真实数据为基础,连通重点人员动态管控清单等相关数据库,根据群众申报信息与后台数据的校验比对结果发放“...

手机每天都会收到下图的短信,还屏蔽不了,打电话给客服也没用,怎么办?

感谢您的阅读!手机也经常收到一些莫名其妙的彩信,让人烦不胜烦。 在解决这个问题之前,我们先了解一次词语:彩信。这是我们早年间很流行的一种信息形式,它支持多媒体功能,可以发送声音、图像、数据等等。那,为什么屡禁不止呢?有一些SP(移动数据业务服务提供商)等利用一些漏洞可以发彩信不要钱,也有一些人通过发...

发表评论

访客

看不清,换一张

◎欢迎参与讨论,请在这里发表您的看法和观点。