#====================Kafka Consumer====================# #kafka source connection timeout session.timeout.ms=60000 #kafka source poll max.poll.records=3000 #kafka source poll bytes max.partition.fetch.bytes=31457280 #====================Kafka Producer====================# #producer重试的次数设置 retries=0 #他的含义就是说一个Batch被创建之后,最多过多久,不管这个Batch有没有写满,都必须发送出去了 linger.ms=10 #如果在超时之前未收到响应,客户端将在必要时重新发送请求 request.timeout.ms=30000 #producer都是按照batch进行发送的,批次大小,默认:16384 batch.size=262144 #Producer端用于缓存消息的缓冲区大小 #128M buffer.memory=134217728 #这个参数决定了每次发送给Kafka服务器请求的最大大小,默认1048576 #10M max.request.size=10485760 #====================kafka default====================# #kafka source protocol; SSL or SASL kafka.source.protocol=SASL #kafka sink protocol; SSL or SASL kafka.sink.protocol=SSL #kafka SASL验证用户名 kafka.user=admin #kafka SASL及SSL验证密码 kafka.pin=galaxy2019 #====================Topology Default====================# #hbase table name hbase.table.name=subscriber_info #邮件默认编码 mail.default.charset=UTF-8 #0不做任何校验,1强类型校验,2弱类型校验 log.transform.type=2 #两个输出之间的最大时间(单位milliseconds) buffer.timeout=100000