1:增加VSYS统计维度。(TSG-11658)

2:优化处理逻辑。
This commit is contained in:
qidaijie
2022-08-26 11:49:52 +08:00
parent dd439b81b3
commit b855062341
14 changed files with 228 additions and 255 deletions

View File

@@ -58,4 +58,4 @@ nacos.group=Galaxy
buffer.timeout=100
#第一次随机分组random范围
random.range.num=40
random.range.num=20

View File

@@ -1,56 +1,55 @@
#--------------------------------地址配置------------------------------#
#管理kafka地址
source.kafka.servers=192.168.40.223:9094,192.168.40.151:9094,192.168.40.152:9094
source.kafka.servers=192.168.44.12:9094
#管理输出kafka地址
sink.kafka.servers=192.168.40.223:9094,192.168.40.151:9094,192.168.40.152:9094
sink.kafka.servers=192.168.44.12:9094
#--------------------------------HTTP------------------------------#
#kafka 证书地址
tools.library=D:\\workerspace\\dat
#--------------------------------nacos配置------------------------------#
#nacos 地址
nacos.server=192.168.44.12:8848
#nacos namespace
nacos.schema.namespace=flink
nacos.schema.namespace=prod
#nacos data id
nacos.data.id=liveChart_session.json
#--------------------------------HTTP------------------------------#
#kafka 证书地址
tools.library=/home/tsg/olap/topology/dat/
#--------------------------------Kafka消费组信息------------------------------#
#kafka 接收数据topic
source.kafka.topic=SESSION-RECORD
#补全数据 输出 topic
sink.kafka.topic=TRAFFIC-PROTOCOL-STAT
sink.kafka.topic=test-result
#读取topic,存储该spout id的消费offset信息可通过该拓扑命名;具体存储offset的位置确定下次读取不重复的数据
group.id=liveCharts-session-20211105-1
group.id=livecharts-test-20220816-1
#--------------------------------topology配置------------------------------#
#consumer 并行度
source.parallelism=9
source.parallelism=1
#map函数并行度
parse.parallelism=27
parse.parallelism=1
#第一次窗口计算并行度
first.window.parallelism=27
first.window.parallelism=1
#第二次窗口计算并行度
second.window.parallelism=27
second.window.parallelism=1
#producer 并行度
sink.parallelism=9
sink.parallelism=1
##初次随机预聚合窗口时间
#初次随机预聚合窗口时间
first.count.window.time=5
#二次聚合窗口时间
second.count.window.time=15