78 lines
2.2 KiB
Markdown
78 lines
2.2 KiB
Markdown
|
# 福建项目：计划对福州长乐OLAP集群扩容
|
|||
|
|
|
|||
|
|
| ID | Creation Date | Assignee | Status |
|
|||
|
|
|----|----------------|----------|--------|
|
|||
|
|
| OMPUB-716 | 2022-12-01T14:23:28.000+0800 | 窦凤虎 | 完成 |
|
|||
|
|
|
|||
|
|
|
|||
|
|
---
|
|||
|
|
|
|||
|
|
目前有计划一两个月内对福州长乐OLAP集群（192.168.8段）扩容。扩容数量暂定30台服务器。请研发人员针对目前福州OLAP集群资源情况，指定扩容方案
|
|||
|
|
|
|||
|
|
硬件配置如下
|
|||
|
|
品牌：浪潮
|
|||
|
|
CPU：Intel Xeon 4314 16c32t *2
|
|||
|
|
内存：256G（32G DDR4 * 8，如有需要可扩容）
|
|||
|
|
硬盘1：600G SAS硬盘*2
|
|||
|
|
硬盘2：960G SSD硬盘 *2
|
|||
|
|
硬盘3：1.2T SAS硬盘 *8（存储节点可替换为8T*8）
|
|||
|
|
RAID卡：8204-8i-2G
|
|||
|
|
|
|||
|
|
**zhangzhihan** commented on *2022-12-05T14:27:22.564+0800*:
|
|||
|
|
|
|||
|
|
[~doufenghu] 扩容计划变更：
|
|||
|
|
原计划30台服务器全部扩容至福州OLAP集群，现规划其中20台给福州OLAP集群扩容，10台给泉州OLAP集群扩容。
|
|||
|
|
|
|||
|
|
|
|||
|
|
|
|||
|
|
---
|
|||
|
|
|
|||
|
|
**qidaijie** commented on *2023-01-03T14:27:33.502+0800*:
|
|||
|
|
|
|||
|
|
系统状态：
|
|||
|
|
1：从TSG界面观察，福州流量在155Gbps-700Gbps，泉州在90Gbps-430Gbps。
|
|||
|
|
2：目前1Gbps流量约产生300条策略日志，新增1Tbps流量后，预计多产生30w/s日志总量。
|
|||
|
|
3：考虑到策略日志量的不确定性，暂以当前的三倍预估更新后日志量，即福州75w/s日志量，泉州40w/s日志量。
|
|||
|
|
4：扩容后以最大日志量计算，两地均满足30天数据存储。
|
|||
|
|
|
|||
|
|
福州扩容规划：
|
|||
|
|
1：原8.14-18Kafka集群关闭（没有SSD），新增3台非存储型服务器加入集群。
|
|||
|
|
2：新增3台非存储型服务器扩容到Flink/Druid集群内。
|
|||
|
|
3：新增3台存储型服务器，扩容到HOS集群内。
|
|||
|
|
4：新增11台存储型服务器，扩容至Clickhouse集群内。
|
|||
|
|
|
|||
|
|
|
|||
|
|
|
|||
|
|
泉州扩容规划：
|
|||
|
|
1：新增3台存储型服务器，扩容到HOS集群内。
|
|||
|
|
2：新增7台存储型服务器，扩容至Clickhouse集群内。
|
|||
|
|
|
|||
|
|
|
|||
|
|
|
|||
|
|
非存储型：1.2T硬盘 * 8 ，存储型：8T硬盘 * 8
|
|||
|
|
|
|||
|
|
|
|||
|
|
|
|||
|
|
---
|
|||
|
|
|
|||
|
|
**zhangzhihan** commented on *2023-02-16T10:33:23.827+0800*:
|
|||
|
|
|
|||
|
|
新增服务器基础环境已配置完毕，计划下周前完成OLAP扩容
|
|||
|
|
|
|||
|
|
|
|||
|
|
|
|||
|
|
---
|
|||
|
|
|
|||
|
|
**zhangzhihan** commented on *2023-03-02T16:01:41.740+0800*:
|
|||
|
|
|
|||
|
|
福建现场扩容完成
|
|||
|
|
|
|||
|
|
|
|||
|
|
|
|||
|
|
---
|
|||
|
|
|
|||
|
|
|
|||
|
|
|
|||
|
|
## Attachments
|
|||
|
|
|