netty网络框架一

标签：netty NIO 框架 Buffer 模型 网络 应用程序 缓冲区 Channel

一、netty是什么

Netty 是一个高性能、异步事件驱动的网络应用程序框架，使用 Java 编写。它提供了一组简单但功能强大的抽象，使得开发人员可以轻松地开发基于网络协议的客户端和服务器应用程序。Netty 的核心是其基于事件驱动模型的异步 I/O 机制，这种机制可以让应用程序在处理大量的并发连接时仍能保持高吞吐量和低延迟。Netty 是一个广泛使用的网络编程框架，在 Web 服务器、远程过程调用 (RPC)、消息队列 (MQ) 等领域都有广泛的应用。

二、应用场景

Netty 可以应用于各种网络通信场景，特别是需要高性能、可扩展性和可靠性的场景，例如：

1. 服务器端应用程序，如 Web 服务器、游戏服务器等。

2. 客户端应用程序，如数据库客户端、消息队列客户端等。

3. 远程过程调用 (RPC) 框架，如 Dubbo、Thrift 等。

4. 分布式系统通信，如 ZooKeeper、Redis 等。

5. 实时通信系统，如聊天室、语音视频通话等。

6. 大数据处理系统，如 Hadoop、Spark 等。

7. 物联网 (IoT) 设备，如传感器、智能家居等。

总之，任何需要高性能、可扩展性和可靠性的网络应用程序都可以使用 Netty 来实现。

三、IO模型简介

IO 模型描述的是程序在进行 Input/Output 操作时，处理数据流的方式和操作系统内核所采用的机制。常见的 IO 模型有以下几种：

1. 阻塞 I/O (Blocking I/O)：当应用程序调用一个阻塞 I/O 操作时，应用程序会一直阻塞，直到操作完成并返回结果。

2. 非阻塞 I/O (Non-blocking I/O)：当应用程序调用一个非阻塞 I/O 操作时，应用程序不会阻塞，而是立即返回一个结果状态码，告诉应用程序该操作是否已经完成。

3. 多路复用 I/O (Multiplexing I/O)：多路复用 I/O 通过 select、poll、epoll 等机制，使得一个线程可以同时监控多个文件描述符，从而实现并发处理多个 I/O 操作。

4. 信号驱动 I/O (Signal-driven I/O)：信号驱动 I/O 与多路复用 I/O 类似，只不过它使用信号来通知应用程序 I/O 操作的就绪状态。

5. 异步 I/O (Asynchronous I/O)：异步 I/O 在完成 I/O 操作之前不需要等待，而是向操作系统注册一个回调函数，当操作完成时，操作系统会通知应用程序执行回调函数，以便应用程序可以继续处理其他任务。

在选择 IO 模型时，需要根据应用场景和性能要求综合考虑，一般情况下，异步 I/O 和多路复用 I/O 是比较高效和可扩展的模型。

四、BIO

BIO (Blocking I/O) 是一种阻塞式的 I/O 模型，它是 Java 中最早的一种 I/O 模型。在 BIO 模型中，当应用程序调用一个 I/O 操作时，应用程序会一直阻塞，直到操作完成并返回结果。如果同时处理多个连接，需要使用多线程来处理每个连接，这使得编写高并发的服务器应用程序非常困难。

BIO 的缺点在于每个客户端连接都需要独占一个线程，当客户端连接数较大时，系统资源开销较大，而且无法充分利用多核 CPU。

BIO 的优点在于编程模型简单，易于理解和使用，适用于低并发、低延迟、数据量小的场景。由于其局限性，现在已经很少在实际应用中采用。

五、NIO

NIO (New I/O) 是一种基于缓冲区、通道和选择器的 I/O 模型，它是 Java 1.4 引入的新特性。在 NIO 模型中，数据先被读取到一个缓冲区中，然后再通过通道 (Channel) 进行传输，从而实现了非阻塞式的 I/O 操作。当应用程序调用一个 I/O 操作时，应用程序不会阻塞，而是立即返回一个结果状态码，告诉应用程序该操作是否已经完成。

NIO 的优点在于可以使用单线程处理多个连接，从而大大减少了系统资源开销，并且可以充分利用多核 CPU。NIO 还提供了非阻塞式的 Socket、ServerSocket 和 DatagramSocket 类，使得编写高并发的服务器应用程序变得更加容易。

NIO 的缺点在于编程模型较为复杂，需要理解缓冲区、通道、选择器等概念，在编写代码时需要考虑很多细节。另外，由于 NIO 需要使用事件驱动模型，因此需要编写回调函数来处理事件，这可能会导致代码结构复杂。

六、NIO的Buffer

在 NIO 模型中，Buffer 是一个很重要的概念，它用于存储读取到的数据或写入的数据。Buffer 提供了一组方法来方便地操作缓冲区中的数据，包括读写操作、转换操作和截取操作等。

常用的 Buffer 子类包括：

1. ByteBuffer：用于存储字节数据。

2. CharBuffer：用于存储字符数据。

3. ShortBuffer、IntBuffer、LongBuffer、FloatBuffer 和 DoubleBuffer：用于存储不同类型的基本数据类型。

Buffer 的核心属性包括：

1. capacity：缓冲区容量，表示缓冲区最多可以存储多少数据。

2. position：当前位置，表示下一个要读或写的数据的位置。

3. limit：限制位置，表示缓冲区中实际可读或可写数据的末尾位置。

4. mark：标记位置，用于记录某个位置，以便后续可以通过 reset 方法将 position 设置为该位置。

在使用 Buffer 时，需要注意以下几点：

1. 确定缓冲区容量。

2. 使用 put() 方法写入数据，使用 flip() 方法将 position 设置为 0，并将 limit 设置为实际可读数据的末尾位置。

3. 使用 get() 方法读取数据，使用 clear() 或 compact() 方法清空缓冲区（如果还有未读完的数据，则使用 compact() 方法）。

4. 可以使用 mark()、reset() 和 rewind() 方法控制 position 的位置。

5. 可以使用 remaining() 和 hasRemaining() 方法判断缓冲区中是否还有剩余数据可读。

七、NIO的三大核心组件关系

NIO 模型中的三大核心组件是缓冲区（Buffer）、通道（Channel）和选择器（Selector）。它们之间的关系如下：

1. 缓冲区：Buffer 是 NIO 模型中的数据存储区域，用于读写数据。在进行 I/O 操作时，数据首先被读取到 Buffer 中，然后通过 Channel 进行传输。

2. 通道：Channel 是 NIO 模型中的数据传输管道，用于连接数据源和数据目标。可以使用不同类型的 Channel 来实现不同协议的通信，例如 SocketChannel 用于 TCP 协议，DatagramChannel 用于 UDP 协议等。

3. 选择器：Selector 是 NIO 模型中的多路复用器，用于监控多个通道的 I/O 状态。通过注册感兴趣的 I/O 事件到 Selector 上，可以让单个线程同时处理多个通道的 I/O 操作，从而提高系统的并发性能。

在 NIO 模型中，应用程序通过将数据写入 Buffer，然后通过 Channel 将数据发送出去。当有数据可读时，通过 Selector 监控通道的 I/O 状态，然后将数据读取到 Buffer 中进行处理。这种模型可以实现高效的非阻塞式 I/O 操作，适用于需要处理大量连接和高并发请求的场景。

八、Channel基本简介

在 NIO 模型中，Channel 是一个重要的概念，用于连接数据源和数据目标，实现数据传输。Java NIO 中提供了多种类型的 Channel，包括：

1. FileChannel：用于对文件进行读写操作。

2. DatagramChannel：用于 UDP 协议的数据传输。

3. SocketChannel：用于 TCP 协议的数据传输。

4. ServerSocketChannel：用于 TCP 协议的服务器端监听。

通过注册感兴趣的 I/O 事件到 Selector 上，可以让单个线程同时处理多个通道的 I/O 操作，从而提高系统的并发性能。

Channel 的常见操作包括：

1. 打开和关闭通道。

2. 读取和写入数据。

3. 获取通道的状态信息，例如连接状态、可读可写状态等。

4. 使用 Channel.transferTo() 和 Channel.transferFrom() 方法实现通道之间的数据传输。

需要注意的是，Channel 是双向的，可以同时进行读取和写入操作。在进行 I/O 操作时，数据首先被读取到 Buffer 中，然后通过 Channel 进行传输。当有数据可读时，通过 Selector 监控通道的 I/O 状态，然后将数据读取到 Buffer 中进行处理。这种模型可以实现高效的非阻塞式 I/O 操作，适用于需要处理大量连接和高并发请求的场景。

九、Buffer类型化和只读

Buffer类型化指的是使用TypedArray或DataView对象来创建一个特定类型的缓冲区，以便可以按照指定的数据类型访问其中的数据。例如，可以创建一个Int8Array类型的缓冲区来存储带符号的8位整数。

只读缓冲区是一种缓冲区，其中的数据不能被修改。这可以通过将缓冲区创建时的属性设置为只读（readOnly）来实现，或者将缓冲区的副本返回给用户，而不是原始的缓冲区。只读缓冲区通常用于保护敏感或重要的数据，以防止无意或恶意修改。

十、MappedByteBuffer

MappedByteBuffer是Java NIO中的一个类，它代表了内存映射文件中的一段缓冲区。使用MappedByteBuffer可以将文件内容直接映射到内存中，从而在读写文件时可以获得更高的性能和更低的延迟。

使用MappedByteBuffer可以按照以下步骤进行：

1. 打开一个文件通道（FileChannel）。
2. 调用FileChannel.map()方法来创建MappedByteBuffer对象，并指定要映射的文件区域和映射模式。
3. 使用MappedByteBuffer对象进行读写操作，就像使用普通的缓冲区一样。
4. 在完成读写操作后，必须调用MappedByteBuffer.force()方法来将缓冲区中的数据强制刷新到磁盘上的文件中，以确保数据的持久化保存。

需要注意的是，由于MappedByteBuffer是基于文件通道进行内存映射的，因此在使用MappedByteBuffer时必须保证文件通道处于打开状态，否则会抛出ClosedChannelException异常。

 

标签：netty,NIO,框架,Buffer,模型,网络,应用程序,缓冲区,Channel
From： https://www.cnblogs.com/15078480385zyc/p/17239893.html