Ubuntu Kafka网络设置怎样好

以下是Ubuntu上优化Kafka网络设置的关键要点：

1. 基础网络配置
   • 使用netplan配置静态IP，确保网络稳定性。
   • 配置/etc/netplan/xx.yaml文件，添加多IP地址（如需多网卡监听）并应用配置。
2. Kafka核心参数优化
   • 监听地址：
     • listeners：绑定具体IP或0.0.0.0（监听所有接口），如PLAINTEXT://0.0.0.0:9092。
     • advertised.listeners：设置为外部可访问的IP（如云服务器公网IP），支持多网卡时需为每个接口指定。
   • 缓冲区与线程：
     • 调整socket.send/receive.buffer.bytes（如1MB），提升网络吞吐。
     • 增加num.network.threads（建议CPU核心数×2）和num.io.threads（匹配CPU核心数），优化并发处理。
3. 安全与性能增强
   • 启用SSL/TLS加密通信（需配置证书），通过listener.security.protocol.map指定协议。
   • 使用压缩算法（如snappy/lz4）减少数据传输量，配置compression.type参数。
4. 防火墙与系统调优
   • 开放Kafka端口（默认9092）及ZooKeeper端口（默认2181）：sudo ufw allow 9092/tcp。
   • 调整系统参数：增大文件描述符限制（ulimit -n 65536），优化TCP缓冲区（net.core.somaxconn）。
5. 集群与高可用配置
   • 多节点部署时，通过advertised.listeners为不同节点指定不同IP，配合ZooKeeper实现负载均衡。
   • 配置inter.broker.listener.name指定内部通信协议，避免跨网段通信问题。

参考来源：