2.2 KiB
福建项目:计划对福州长乐OLAP集群扩容
| ID | Creation Date | Assignee | Status |
|---|---|---|---|
| OMPUB-716 | 2022-12-01T14:23:28.000+0800 | 窦凤虎 | 完成 |
目前有计划一两个月内对福州长乐OLAP集群(192.168.8段)扩容。扩容数量暂定30台服务器。请研发人员针对目前福州OLAP集群资源情况,指定扩容方案
硬件配置如下 品牌:浪潮 CPU:Intel Xeon 4314 16c32t 2 内存:256G(32G DDR4 * 8,如有需要可扩容) 硬盘1:600G SAS硬盘2 硬盘2:960G SSD硬盘 *2 硬盘3:1.2T SAS硬盘 8(存储节点可替换为8T8) RAID卡:8204-8i-2G
zhangzhihan commented on 2022-12-05T14:27:22.564+0800:
[~doufenghu] 扩容计划变更: 原计划30台服务器全部扩容至福州OLAP集群,现规划其中20台给福州OLAP集群扩容,10台给泉州OLAP集群扩容。
qidaijie commented on 2023-01-03T14:27:33.502+0800:
系统状态: 1:从TSG界面观察,福州流量在155Gbps-700Gbps,泉州在90Gbps-430Gbps。 2:目前1Gbps流量约产生300条策略日志,新增1Tbps流量后,预计多产生30w/s日志总量。 3:考虑到策略日志量的不确定性,暂以当前的三倍预估更新后日志量,即福州75w/s日志量,泉州40w/s日志量。 4:扩容后以最大日志量计算,两地均满足30天数据存储。
福州扩容规划: 1:原8.14-18Kafka集群关闭(没有SSD),新增3台非存储型服务器加入集群。 2:新增3台非存储型服务器扩容到Flink/Druid集群内。 3:新增3台存储型服务器,扩容到HOS集群内。 4:新增11台存储型服务器,扩容至Clickhouse集群内。
泉州扩容规划: 1:新增3台存储型服务器,扩容到HOS集群内。 2:新增7台存储型服务器,扩容至Clickhouse集群内。
非存储型:1.2T硬盘 * 8 ,存储型:8T硬盘 * 8
zhangzhihan commented on 2023-02-16T10:33:23.827+0800:
新增服务器基础环境已配置完毕,计划下周前完成OLAP扩容
zhangzhihan commented on 2023-03-02T16:01:41.740+0800:
福建现场扩容完成