60 lines
2.1 KiB
Markdown
60 lines
2.1 KiB
Markdown
|
# M22项目YGN-NDC设备数量扩容初步评估
|
|||
|
|
|
|||
|
|
| ID | Creation Date | Assignee | Status |
|
|||
|
|
|----|----------------|----------|--------|
|
|||
|
|
| OMPUB-1499 | 2024-10-10T10:26:58.000+0800 | 兰杰 | 完成 |
|
|||
|
|
|
|||
|
|
|
|||
|
|
---
|
|||
|
|
|
|||
|
|
M业主近期在评估扩容事宜，想要初步了解YGN-NDC在多个全量日志回传站点扩容总带宽1T之后需增加设备的数量。
|
|||
|
|
|
|||
|
|
评估范围：
|
|||
|
|
1. YGN-NDC现有存储余量，可容纳多少日志量（转化为扩容链路带宽数量）。
|
|||
|
|
2. 按照1T链路扩容目标，拟增加YGN-NDC设备数量。
|
|||
|
|
|
|||
|
|
前置条件：存储周期至少14天。**liuyang** commented on *2024-10-10T15:32:01.274+0800*:
|
|||
|
|
|
|||
|
|
假设YGN各站点扩容带宽共1T，流量占比70%。麻烦 [~doufenghu]评估下：
|
|||
|
|
* 产生回传数据量（Metric，Log，File）及这些回传数据需要多少服务器
|
|||
|
|
* 目前YNG-NDC需要扩容设备数量
|
|||
|
|
* 其他需要关注问题：比如数据回传带宽是否足够、计算资源是否足够、磁盘IO等其他资源是否足够
|
|||
|
|
|
|||
|
|
|
|||
|
|
|
|||
|
|
---
|
|||
|
|
|
|||
|
|
**doufenghu** commented on *2024-10-10T17:07:27.622+0800*:
|
|||
|
|
|
|||
|
|
基于现有环境，带宽扩容1 Tbps，OLAP在YNG-NDC不需要进行扩容。NDC侧系统性能指标与扩容前后对比：
|
|||
|
|
|性能指标|理论|当前（占比）|扩容后|
|
|||
|
|
|数据传输带宽|N/A|10 Gbps|13 Gbps (当前 × 130%)|
|
|||
|
|
|消息队列磁盘 IO 吞吐|22.5 GB/s|2.7 GB/s (12%)|3 GB/s (当前 × 110%)|
|
|||
|
|
|日志存储磁盘 IO 吞吐|42 GB/s|7.2 GB/s (17%)|9 GB/s (当前 × 125%)|
|
|||
|
|
|会话日志处理能力|6.4 M/s|2.6 M/s (40%)|4.1 M/s (当前 × 150%)|
|
|||
|
|
|Metrics 日志处理能力|8 M/s|4.2 M/s (52%)|4.6 M/s (当前 × 110%)|
|
|||
|
|
|日志存储占用|6160 TB|760 TB (12%)|840 TB (当前 × 110%)|
|
|||
|
|
|Metric 存储占用|252 TB|105 TB (42%)|115 TB (当前 × 110%)|
|
|||
|
|
* 日志存储周期30天，目前仅6个数据中心回传会话日志
|
|||
|
|
* Metric 存储周期60天
|
|||
|
|
* 处理能力/IO吞吐，按流量峰值计算
|
|||
|
|
|
|||
|
|
独立环境，根据OLAP资源规划测算，1Tbps流量需要OLAP服务器22台，其中存储14天日志Server2配置的服务器需要4台。
|
|||
|
|
|
|||
|
|
|
|||
|
|
|
|||
|
|
---
|
|||
|
|
|
|||
|
|
**lanjie** commented on *2024-10-16T10:17:27.622+0800*:
|
|||
|
|
|
|||
|
|
收到，已回复业主，暂无反馈。
|
|||
|
|
|
|||
|
|
|
|||
|
|
|
|||
|
|
---
|
|||
|
|
|
|||
|
|
|
|||
|
|
|
|||
|
|
## Attachments
|
|||
|
|
|