10_尚硅谷_数仓采集_集群资源规划设计

好，服务器选完了啊，我们要选择什么服务器类型，那下边要算的是就是集群的规划，那问大家问题，你买多少台服务器呀。啊，买多少台服务器，那第一句话就是，如果老板问你这个问题，第一句话就是看需求对吧，那你看看什么需求，我才决定买多少台服务器，那现在需求来了，然后你就开始慌了，那需求是这样的，每天日活10万啊，100万，日活跃用户100万，每人平均100条。啊，100条，那就说每天是1亿条，一条数据。啊，那这个呢，就符合一个中小型公司的数据代码啊嗯，像咱们那个企业老师，他们是每天2亿条，TCLL内部每天2亿条。嗯。那咋办？弄一个仪器啥的。

那好，那这个这些，那下面每条日志1K左右，正常情况下企业的标准日志是0.5K到2K，咱们选择中间值1K。那么每天一条数据多少G呢？约等于100G，约等于啊，就等于啊，那一条是100G，那么你1000万条是多少？10G啊，1000万条啊，差不多对应了10G 2000万条20G啊这样一面好，那有了这些数据，那剩下的事我就开始问你了。那我要想保证半年内不换福气，不需要追加福气，我这个机器应该整事。8G的示盘啊，现在是8G的示盘服务器是吧，180G内存盘，我要求半年内我不需要在维护这集器啊，集群也也就说不需要再增加机器对吧。

来，我找一个找个云波，你给我说说，大神头，嗯，你说说。嗯。对，那怎么算，你用怎么算一天110。那你问我的，这好难呐，这个了一半八天，然后呢。八个七的花生是128斤。这是18T啊18T，然后呢，你买多台服务器。大的。

数据副本啊副本，那就说18G再乘以个三得多少54呗，54T，那买多少台服务器。二应该是。嗯，对，要有定预料对吧，啊要点预料预留多少呢。一两。啊，还不错啊，还不错啊，应该是提前看了文档了，看一下啊，这20年了，这个思路没问题啊，来看第一个，首先它是要求半年内不扩容服务器，这个很重要哈，很重要我是要跟你们昨天你们说了吗？因为政府部门他要求十年内不换服务器啊，那这个服务器至少是他妈上千台啊，上下服务器啊，很猛啊，但是没有必要就他们就是下级指标。

那像正常情况下半年内不扩容服务器，那就是100G乘以月8G约等于18G啊，18G啊，那么咱们这个数据有副本吗？默认就是三个啊，差不多啊，正常情况下企业也都是三个，那三台副本的话，54G。那继续。你要有预留20%~30%的buff，什么意思，也就说你能把这54G全部用用没吗？不可能对不对，至少要留一个啊，20%~30%，那这时候那就是。它去除以这个0.7啊0.7那就是按30%算的八号呗，预留那就是得77T，也就说你有77T的空间，那么它达到了百用就还剩吧，啊还剩30%的预量，那是不是正常完美了啊，完美的这样。

那时候你有77T，那么每个服务器的磁盘8T能买多少个？对吧，嗯，8T乘以十是不是是80T了啊，差不多吧，啊，那这样十台服务器就脱妥了。行，那这个呢，就是十台服务器啊，十台啊，正常情况下一个中小型公司呃的服务器呢，也就是在十台左右，十台左右啊差不多啊，满足需求，那下面又来了，那现在是只是把这个数据拷到这个H台上，没有做任何处理吧，那正常我们这个项目是干嘛的，数仓啊数仓那就要分析这里面的数据，而且我反复强调数仓其实是分了四层。市场。啊，那这里面数据量又怎么算呢。

呃，后边呢，这个服务器啊，至少在这个基础上还要扩容一到两倍啊，看这个老板他的需求和你们这个项目的一个进展程度，你可以逐渐的往上去追讲啊，去追加啊，后面这个书仓讲完之后再给来一说，因为现在呢，大家对这个书仓里面分几层，每层做什么事没有什么概念啊，日后呢，再给大家计块补偿，那至少前面这块的计算是必须要会的。啊，一步一步来的，怎么得出来这十代服气。OK。