吊打面试官之集群规模计算

吊打面试官之集群规模计算

1.如何确定集群规模？（假设，每一台服务器8T磁盘，128G）

• 每天日活跃用户100w，每一个人一天平均100条；100w*100条=10000w
• 每条日志1k左右，每天1亿条；10000 0000 /1024/1024=约100G
• 半年内不扩容服务器来算；100G*180天 = 约18T
• 保存3副本；18T*3 = 54T
• 预留20%~30%Buf = 54T/0.7=77T
• 到这里；约8T*10台服务器

2.如果考虑数仓分层？
服务器将近在扩容1-2倍