2.1 KiB
M22项目YGN-NDC设备数量扩容初步评估
| ID | Creation Date | Assignee | Status |
|---|---|---|---|
| OMPUB-1499 | 2024-10-10T10:26:58.000+0800 | 兰杰 | 完成 |
M业主近期在评估扩容事宜，想要初步了解YGN-NDC在多个全量日志回传站点扩容总带宽1T之后需增加设备的数量。
评估范围：
- YGN-NDC现有存储余量，可容纳多少日志量（转化为扩容链路带宽数量）。
- 按照1T链路扩容目标，拟增加YGN-NDC设备数量。
前置条件：存储周期至少14天。liuyang commented on 2024-10-10T15:32:01.274+0800:
假设YGN各站点扩容带宽共1T，流量占比70%。麻烦 [~doufenghu]评估下：
- 产生回传数据量（Metric，Log，File）及这些回传数据需要多少服务器
- 目前YNG-NDC需要扩容设备数量
- 其他需要关注问题：比如数据回传带宽是否足够、计算资源是否足够、磁盘IO等其他资源是否足够
doufenghu commented on 2024-10-10T17:07:27.622+0800:
基于现有环境，带宽扩容1 Tbps，OLAP在YNG-NDC不需要进行扩容。NDC侧系统性能指标与扩容前后对比： |性能指标|理论|当前（占比）|扩容后| |数据传输带宽|N/A|10 Gbps|13 Gbps (当前 × 130%)| |消息队列磁盘 IO 吞吐|22.5 GB/s|2.7 GB/s (12%)|3 GB/s (当前 × 110%)| |日志存储磁盘 IO 吞吐|42 GB/s|7.2 GB/s (17%)|9 GB/s (当前 × 125%)| |会话日志处理能力|6.4 M/s|2.6 M/s (40%)|4.1 M/s (当前 × 150%)| |Metrics 日志处理能力|8 M/s|4.2 M/s (52%)|4.6 M/s (当前 × 110%)| |日志存储占用|6160 TB|760 TB (12%)|840 TB (当前 × 110%)| |Metric 存储占用|252 TB|105 TB (42%)|115 TB (当前 × 110%)|
- 日志存储周期30天，目前仅6个数据中心回传会话日志
- Metric 存储周期60天
- 处理能力/IO吞吐，按流量峰值计算
独立环境，根据OLAP资源规划测算，1Tbps流量需要OLAP服务器22台，其中存储14天日志Server2配置的服务器需要4台。
lanjie commented on 2024-10-16T10:17:27.622+0800:
收到，已回复业主，暂无反馈。