Jafka源代码分析——网络架构


kafka中,每一个broker都是一个服务器。按照一般理解,服务器就是一个SocketServer,其不断接收用户的请求并进行处理。在Java中进行网络连接有两种方式一种为阻塞模式一种为非阻塞模式。Jafka采用非阻塞模式进行网络通讯。在Java的非阻塞模式中,建立socket server的一般流程如下:

1.启动ServerSocketChannel并将其绑定到特定的端口。

2.将ServerSocketChannel以及其感兴趣的操作注册到Selector,在这里感兴趣的操作是Accept

3.不断轮询Selector是否有感兴趣的事件发生,如果有则accept远程连接并进行处理

以上基本上是所有网络编程的基本流程,jafka也不例外。在jafka中,类Acceptor具体负责服务器的实现。该实现比较简单,这里不再做详细的叙述。

需要注意的是,Acceptor接收客户端的请求后会把其交给Processor类进行处理。用户会在配置文件中配置Processor的个数,Acceptor会议、以round robin的方式将客户端连接交给Processor进行处理。

相关内容