https://www.gravatar.com/avatar/dfba7b9af4258f14b883b676b32bf3db?s=240&d=mp

爱宝儿

游戏开发及物联网大数据集群维护及部署开发,数据存储及相关设计,大数据、ETL、Flink、kafka,hadoop框架等多种技术开>发技术。涵盖语言涉及Java、Go、Python、C、C#等。

仅供学习参考

kafka Broker服务器配置

基本服务器配置 一个基本的代理配置可能看起来像这样。您将看到主题、话题和日志的设置。 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 num.partitions=1 default.replication.factor=3 offsets.topic.replication.factor=3 transaction.state.log.replication.factor=3 transaction.state.log.min.isr=1 log.retention.hours=168 log.segment.bytes=1073741824 log.retention.check.interval.ms=300000 num.network.threads=3 num.io.threads=8 num.recovery.threads.per.data.dir=1 socket.send.buffer.bytes=102400 socket.receive.buffer.bytes=102400

kafka 生产者配置优化

基本生产者配置 1 2 3 4 5 bootstrap.servers=localhost:9092 key.serializer=org.apache.kafka.common.serialization.StringSerializer value.serializer=org.apache.kafka.common.serialization.StringSerializer client.id=my-client compression.type=gzip 此配置指定连接到 Kafka 集群的引导地址,以及将消息的键和值从字符串转换为其相应的原始字节数据表示的序列化程序。 (