kafka.network.SocketServer分析

【kafka.network.SocketServer分析】的更多相关文章

kafka.network.SocketServer分析

当Kafka启动时,会启动这个SocketServer来接收客户端的连接,处理客户端请求,发送响应. 这个类的注释说明了这个socket server的结构 /** * An NIO socket server. The threading model is * 1 Acceptor thread that handles new connections * N Processor threads that each have their own selector and read reques…

Kafka Network层解析，还是有人把它说清楚了

我们知道kafka是基于TCP连接的.其并没有像很多中间件使用netty作为TCP服务器.而是自己基于Java NIO写了一套. 几个重要类先看下Kafka Client的网络层架构. 本文主要分析的是Network层. Network层有两个重要的类:Selector和KafkaChannel. 这两个类和Java NIO层的java.nio.channels.Selector和Channel有点类似. Selector几个关键字段如下 // jdk nio中的Selector java.n…

kafka Network

Kafka network Processor SocketServer.Processor override def run() { startupComplete() try { while (isRunning) { try { // 从connetions queue 中取出 New connection 配置相关信息(register OP_READ),初始化配置 configureNewConnections() //处理所有响应client的 io write //(request…

Apache Kafka源码分析 – Broker Server

1. Kafka.scala 在Kafka的main入口中startup KafkaServerStartable, 而KafkaServerStartable这是对KafkaServer的封装 1: val kafkaServerStartble = new KafkaServerStartable(serverConfig) 2: kafkaServerStartble.startup 1: package kafka.server 2: class KafkaServerStartable…

kafka.network.AbstractServerThread中的线程协作机制

这个虚类是kafka.network.Acceptor和kafka.network.Processor的父类,提供了一个抽象的Sever线程. 它的有趣之处在于为子类的启动和停止提供了线程间的协作机制. 当子类的shutdown方法被调用时,子类可以得知自己被停止,在子类做了适当的处理和清理后,调用自己的shutdownComplete方法,使得对子类shutdown方法的调用从阻塞状态返回,从而使调用线程得知子类的对象已经恰当的停止. 即,在另一个线程中要关闭一个AbstractServerT…