从零开始学习Netty - 学习笔记 - NIO基础 - ByteBuffer: 简介和基本操作

NIO基础

1.三大组件

1.1. Channel & Buffer

在这里插入图片描述

Channel

在Java NIO（New I/O）中，“Channel”（通道）是一个重要的概念，用于在非阻塞I/O操作中进行数据的传输。Java NIO提供了一种更为灵活和高效的I/O处理方式，相比于传统的I/O，它具有更好的性能和可扩展性。

常见的Java NIO中的通道类型：

  1. FileChannel（文件通道）：
    • 用于文件I/O操作的通道，可以在文件中进行读取、写入和操作。
  2. SocketChannel（套接字通道）：
    • 用于TCP协议的通道，可以在网络套接字连接中进行读取和写入数据。(客户端，服务器端都能用)
  3. ServerSocketChannel（服务器套接字通道）：
    • 监听新的TCP连接的通道，当有新的连接进来时，可以接受并创建对应的SocketChannel。（只能用于服务器端）
  4. DatagramChannel（数据报通道）：
    • 用于UDP协议的通道，可以在网络中发送和接收数据报。

通过使用这些通道，Java NIO可以提供非阻塞的I/O操作，允许程序在一个线程中管理多个I/O操作，提高了系统的并发处理能力和性能表现。通道和缓冲区（Buffer）结合使用，能够实现更灵活、高效的数据传输和处理。

Buffer
在Java NIO中，Buffer（缓冲区）是一个核心概念，用于在通道（Channel）和数据源之间进行数据交互。Buffer实际上是一个容器，用于存储特定类型的数据，并提供了方便的方法来读取和写入数据。

常见的Java NIO中的Buffer类型：

  1. ByteBuffer：

    • ByteBuffer是最基本的缓冲区类型，用于存储字节数据。
      • MappedByteBuffer：
        • MappedByteBuffer是ByteBuffer的一个子类，它通过文件通道直接映射到内存中，可以实现高效的文件I/O操作。

  2. CharBuffer：

    • CharBuffer用于存储字符数据。

  3. ShortBuffer、IntBuffer、LongBuffer、FloatBuffer、DoubleBuffer：

    • 这些是用于存储各种基本数据类型的缓冲区，分别用于存储short、int、long、float和double类型的数据。

这些缓冲区提供了一种灵活的方式来管理数据，可以在缓冲区和通道之间进行数据传输，也可以在缓冲区内部进行数据处理。通过缓冲区，Java NIO实现了高效的I/O操作，可以在同一线程内处理多个通道，提高了系统的并发性能。

1.2.Selector

在这里插入图片描述

当使用 Java NIO 进行非阻塞 I/O 操作时，Selector（选择器）是一种关键的组件。它允许单个线程有效地管理多个 Channel，监视它们的状态并且在至少一个 Channel 准备好进行读取、写入或者连接时，唤醒线程。

Selector 的作用是配置一个线程来管理多个 Channel，获取这些 Channel 上发生的事件。这些 Channel 通常工作在非阻塞模式下，因此不会让线程阻塞在一个 Channel 上。Selector 适用于连接数量特别多但流量低的场景，因为它可以有效地利用一个线程来处理多个连接，降低线程创建和上下文切换的开销。

  1. 非阻塞 I/O：
    • Selector 允许程序使用单个线程处理多个 Channel，而不是为每个 Channel 都创建一个线程。这样可以显著减少线程的数量，提高系统的并发处理能力。
  2. Channel 注册：
    • 在使用 Selector 之前，需要将每个 Channel 注册到 Selector 上，并指定感兴趣的事件类型，如读、写、连接等。
  3. 事件就绪集合：
    • Selector 会不断轮询注册在其上的 Channel，当一个或多个 Channel 准备好进行 I/O 操作时，Selector 将返回一个就绪事件的集合。
  4. 事件驱动的编程模型：
    • 应用程序通过监听就绪事件的方式，实现了一种事件驱动的编程模型，根据不同的事件类型执行相应的操作。
  5. 资源管理：
    • 使用完 Selector 后，应及时关闭以释放资源，避免资源泄漏和性能问题。

通过 Selector，Java NIO 提供了一种高效的非阻塞 I/O 模型，使得应用程序能够更好地处理大量并发连接，提高系统的性能和可伸缩性。

2.ByteBuffer

ByteBuffer 是 Java NIO 中用于处理字节数据的缓冲区类之一。它提供了一种灵活的方式来处理字节数据，例如读取、写入、修改、复制等操作。

以下是关于 ByteBuffer 的一些重要特点和用法：

  1. 容量和位置：
    • ByteBuffer 有一个固定的容量，表示它可以存储的最大字节数量。它还有一个位置（position），表示下一个读取或写入操作将要发生的位置。
  2. 读写操作：
    • ByteBuffer 可以被用来进行读取和写入操作。它提供了诸如 put()、get()、putInt()、getInt() 等方法来读取和写入字节数据。
  3. 字节顺序（Byte Order）：
    • ByteBuffer 可以配置为使用不同的字节顺序，例如大端字节序（Big Endian）或小端字节序（Little Endian），以适应不同的数据格式。
  4. 直接缓冲区和非直接缓冲区：
    • ByteBuffer 可以是直接缓冲区或非直接缓冲区。直接缓冲区使用操作系统的内存空间，通常性能更好，而非直接缓冲区使用 Java 虚拟机的堆内存。
  5. 清除、翻转和重绕：
    • ByteBuffer 提供了一些方法来处理缓冲区的状态，例如 clear() 方法清除缓冲区中的数据(写模式)、flip() 方法翻转缓冲区以便读取已写入的数据(读模式)、rewind() 方法重绕缓冲区以便重新读取已读数据(写模式)。
  6. 其他操作：
    • ByteBuffer 还提供了一些其他的操作，如 compact() 方法压缩缓冲区、slice() 方法创建一个新的缓冲区视图等。

ByteBuffer 在网络编程、文件 I/O、数据处理等领域广泛应用，它是 Java NIO 中处理字节数据的重要工具之一，提供了高效、灵活的字节数据处理方式。

2.1.案例1-读取文件内容

/*** ByteBuffer 测试测试读取文件* @author 13723* @version 1.0* 2024/2/19 21:30*/
public class ByteBufferTest {private static final Logger logger = LoggerFactory.getLogger(MethodHandles.lookup().lookupClass());@Test@DisplayName("测试读取文件")public void testReadFile() {// 1.读取文件try (FileChannel channel = new FileInputStream("data.txt").getChannel()) {while (true){// 1.1 创建一个缓冲区(划分一块内存作为缓冲区) 每次读取只取5个字节 5个字节读取完毕后再读取下一个5个字节ByteBuffer byteBuffer = ByteBuffer.allocate(5);// 1.2 读取数据到缓冲区int len = channel.read(byteBuffer);// 读取到文件末尾 len = -1 退出循环if (len == -1) {break;}// 1.3 打印缓冲区的内容// 切换到读模式byteBuffer.flip();while (byteBuffer.hasRemaining()){ // 检查是否存在未读取的数据byte b = byteBuffer.get();logger.error("读取到的字节为：{}", (char) b);}// 1.4 每次读取完成切换为写模式byteBuffer.clear();}} catch (IOException e) {}}
}

在这里插入图片描述

2.2.ByteBuffer结构

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

compact方法，就是把未读取完成的部分向前压缩，然后切换为写模式下次写入的位置，是从上次没有读完的位置开始的

在这里插入图片描述

2.3.案例2-读取写入数据

	@Test@DisplayName("测试ByteBuffer写入读取数据")public void test2(){ByteBuffer buffer = ByteBuffer.allocate(10);// 写入一个字节 ‘a’buffer.put((byte) 'a');// 打印字符debugAll(buffer);// 再写入两个字节buffer.put(new byte[]{'b', 'c'});debugAll(buffer);// 切换成模式，此时position = 0, limit = 3buffer.flip();byte b = buffer.get();System.out.println((char) b);debugRead(buffer);buffer.compact();debugAll(buffer);}

在这里插入图片描述

  • 调用compact方法

在这里插入图片描述

2.4.ByteBuffer常见方法

2.4.1.分配空间

可以使用 allocate 方法为 ByteBuffer 分配空间，其他 Buffer 类也有该方法 不能动态调整容量 netty对ByteBuffer这里做了增强，可以动态调整

它使用的是 Java 堆内存（Heap Memory）。allocate 方法分配的是一个非直接缓冲区，即缓冲区的数据存储在 Java 虚拟机的堆内存中。

堆内存的优势在于它的管理由 Java 虚拟机负责，而且垃圾回收器可以有效地回收不再使用的对象，但是在进行 I/O 操作时，需要将数据从堆内存复制到内核空间，存在额外的拷贝开销。

读写效率低

ByteBuffer buffer = ByteBuffer.allocate(10);

allocateDirect(10),它使用的是直接缓冲区（Direct Buffer），可以通过 ByteBuffer.allocateDirect() 方法来创建。直接缓冲区的数据存储在操作系统的内存中（不会受到垃圾回收的影响），减少了数据在 Java 堆和本地堆之间的拷贝操作，提高了 I/O 操作的效率。但是，直接缓冲区的分配和释放通常更昂贵，可能导致内存泄漏问题。、

读写效率高（少一次拷贝）

ByteBuffer buffer1 = ByteBuffer.allocateDirect(10);
2.4.2.包装现有数组

如果有现有的字节数组，可以使用 wrap 方法将其包装成 ByteBuffer

byte[] byteArray = new byte[10];
ByteBuffer buffer = ByteBuffer.wrap(byteArray);
2.4.3.获取和设置容量

获取 ByteBuffer 的容量（capacity）

int capacity = buffer.capacity();

设置 ByteBuffer 的容量（慎用，可能导致数据丢失）

buffer.capacity(20);
2.4.4.获取和设置位置

获取 ByteBuffer 的位置（position）

int position = buffer.position();

设置 ByteBuffer 的位置（position），用于读取或写入数据

buffer.position(5);
2.4.5.获取限制和设置限制

获取 ByteBuffer 的限制（limit），即可以读取或写入的最大位置

int limit = buffer.limit();

设置 ByteBuffer 的限制（limit）

buffer.limit(8);
2.4.6.读取和写入数据

从 ByteBuffer 中读取字节数据

也可也调用channel的wirte方法

byte b = buffer.get();
int r = channel.wite(buffer);

向 ByteBuffer 中写入字节数据

int read = channel.read();

也可也调用channel的read方法

buffer.put((byte) 10);
channel.read(buffer);
2.4.7.翻转缓冲区

将 ByteBuffer 从写模式切换到读模式，通常在写入数据后调用

buffer.flip();
2.4.8.清空缓冲区

清空 ByteBuffer 中的数据，通常在读取数据后调用

buffer.clear();
2.4.9.倒带缓冲区

将 ByteBuffer 的位置设置为 0，通常在重新读取数据时调用

buffer.rewind();
2.4.10.压缩缓冲区

将未读取的数据复制到缓冲区的开始处，然后将位置设置为复制的数据末尾，通常在写入部分数据后调用

buffer.compact();
2.4.11.标记和重置位置

标记当前的位置，通常与 reset 方法一起使用，用于返回到之前标记的位置，,比如中间某些数据重要需要返回读取

buffer.mark();

重置位置到之前标记的位置

buffer.reset();

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.rhkb.cn/news/260175.html

如若内容造成侵权/违法违规/事实不符，请联系长河编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

【Redis,Java】Redis的两种序列化方式—nosql数据库

【Redis,Java】Redis的两种序列化方式—nosql数据库

redis和mysql的区别： redis是属于nosql的数据库，而mysql是属于sql数据库，redis是属于nosql数据库。mysql是存储在磁盘中的，redis是存储在内存中的，所以redis的读取书读快。这里所说的redis代表nosql，而mysq…
阅读更多...
【打工日常】使用docker部署可视化工具docker-ui

【打工日常】使用docker部署可视化工具docker-ui

一、docker-ui介绍 docker-ui是一个易用且轻量化的Docker管理工具，透过Web界面的操作，方便快捷操作docker容器化工作。 docker-ui拥有易操作化化界面，不须记忆docker指令，仅需下载镜像即可立刻加入完成部署。基于docker的特性&…
阅读更多...
数据分析 - 机器学习

数据分析 - 机器学习

1：线性回归 线性回归是一种统计技术用于对输出变量与一个或多个输入变量之间的关系进行建模 用外行人的话来说，将其视为通过某些数据点拟合一条线，如下所示 以便在未知数据上进行预测，假设变量之间存在线性关系 点和线之间存在微小…
阅读更多...
OpenCV中的边缘检测技术及实现

OpenCV中的边缘检测技术及实现

介绍: 边缘检测是计算机视觉中非常重要的技术之一。它用于有效地识别图像中的边缘和轮廓，对于图像分析和目标检测任务至关重要。OpenCV提供了多种边缘检测技术的实现，本博客将介绍其中的两种常用方法：Canny边缘检测和Sobel边缘检测。 理论介…
阅读更多...
MySQL5.7升级到MySQL8.0的最佳实践分享

MySQL5.7升级到MySQL8.0的最佳实践分享

一、前言 事出必有因，在这个月的某个项目中，我们面临了一项重要任务，即每年一次的等保测评整改。这次测评的重点是Mysql的一些高危漏洞，客户要求我们无论如何必须解决这些漏洞。尽管我们感到无奈，但为了满足客户的要求…
阅读更多...
Guitar Pro8最新版本版本有哪些功能更新？

Guitar Pro8最新版本版本有哪些功能更新？

Guitar Pro 8的最新版本相较于之前的版本，有以下显著的功能更新： 音频轨道功能：这是Guitar Pro 8中一个非常实用的新功能。用户现在可以在GTP文件中添加伴奏音轨，无论是人声还是完整的录音，都可以与编写的谱子同时播放…
阅读更多...
区块链革命：Web3如何改变我们的生活

区块链革命：Web3如何改变我们的生活

随着技术的不断发展，区块链技术作为一种去中心化的分布式账本技术，正逐渐成为数字世界的核心。Web3作为区块链技术的重要组成部分，正在引领着数字化时代的变革，其影响已经开始渗透到我们生活的方方面面。本文将深入探讨区块链革命…
阅读更多...
Maven属性scope

Maven属性scope

参考： maven 中 scope标签的作用（runtime、provided、test、compile 的作用） 【Maven】属性scope依赖作用范围详解 scope为provided
阅读更多...
python工具方法 45 基于ffmpeg以面向对象多线程的方式实现实时推流

python工具方法 45 基于ffmpeg以面向对象多线程的方式实现实时推流

1、视频推流 参考基于ffmpeg模拟监控摄像头输出rtsp视频流并opencv播放 实现视频流的推流。 其基本操作就是，安装视频流推流服务器，ffmpeg，准备好要推流的视频。 命令如下所示：ffmpeg -re -stream_loop -1 -i 风景视频素材分享.flv -c copy -f rtsp rtsp://127.0.0.1:554/…
阅读更多...
探索AI视频生成新纪元：文生视频Sora VS RunwayML、Pika及StableVideo——谁将引领未来

探索AI视频生成新纪元：文生视频Sora VS RunwayML、Pika及StableVideo——谁将引领未来

探索AI视频生成新纪元：文生视频Sora VS RunwayML、Pika及StableVideo——谁将引领未来 sora文生视频，探索AI视频生成新纪元 由于在AI生成视频的时长上成功突破到一分钟，再加上演示视频的高度逼真和高质量，Sora立刻引起了轰动。在S…
阅读更多...
瑞_23种设计模式_代理模式

瑞_23种设计模式_代理模式

文章目录 1 代理模式（Proxy Pattern）1.1 介绍1.2 概述1.3 代理模式的结构 2 静态代理2.1 介绍2.2 案例——静态代理2.3 代码实现 3 JDK动态代理★★★3.1 介绍3.2 代码实现3.3 解析代理类3.3.1 思考3.3.2 使用 Arthas 解析代理类3.3.3 结论 3.4 动态代理…
阅读更多...
19. 【Linux教程】nano 编辑器

19. 【Linux教程】nano 编辑器

前面小节介绍了如何使用 vim 编辑器，相比于 vim 编辑器，nano 编辑器就比较简单了。nano 是 UNIX 系统中的一个文本编辑器，大部分 Linux 发行版本默认都安装了 nano 文本编辑器。 和 vim 编辑器相比，nano 编辑器就没有那么强大&am…
阅读更多...
【算法】约瑟夫环问题解析与实现

【算法】约瑟夫环问题解析与实现

一、导言 约瑟夫环（Josephus Problem）是一个经典的数学问题，涉及一个编号为 1 到 n 的人围成一圈，从第一个人开始报数，报到某个数字 m 的人出列，然后再从下一个人开始报数，如此循环&#xff0c…
阅读更多...
阿里云服务器操作系统有哪些？如何选择？

阿里云服务器操作系统有哪些？如何选择？

阿里云服务器镜像怎么选择？云服务器操作系统镜像分为Linux和Windows两大类，Linux可以选择Alibaba Cloud Linux，Windows可以选择Windows Server 2022数据中心版64位中文版，阿里云服务器网aliyunfuwuqi.com来详细说下阿里云服务器操…
阅读更多...
神经网络——循环神经网络（RNN）

神经网络——循环神经网络（RNN）

神经网络——循环神经网络（RNN） 文章目录 神经网络——循环神经网络（RNN）一、循环神经网络（RNN）二、循环神经网络结构1、一对一（One to One）2、一对多（One to Many&#…
阅读更多...
代码随想录算法训练营第五十六天|300.最长递增子序列 ， 674. 最长连续递增序列 ，718. 最长重复子数组

代码随想录算法训练营第五十六天|300.最长递增子序列 ， 674. 最长连续递增序列 ，718. 最长重复子数组

300.最长递增子序列 今天开始正式子序列系列，本题是比较简单的，感受感受一下子序列题目的思路。 视频讲解：动态规划之子序列问题，元素不连续！| LeetCode：300.最长递增子序列_哔哩哔哩_bilibili 代码随想录…
阅读更多...
PyCharm 调试过程中控制台 (Console) 窗口内运行命令 - 实时获取中间状态

PyCharm 调试过程中控制台 (Console) 窗口内运行命令 - 实时获取中间状态

PyCharm 调试过程中控制台 [Console] 窗口内运行命令 - 实时获取中间状态 1. yongqiang.py2. Debugger -> Console3. Show Python PromptReferences 1. yongqiang.py #!/usr/bin/env python # -*- coding: utf-8 -*- # yongqiang chengfrom __future__ import absolute_imp…
阅读更多...
【FastAPI】P3 请求与响应

【FastAPI】P3 请求与响应

目录 请求路径参数查询参数 响应JSON 响应文本响应返回 Pydantic 模型 在网络通讯中，请求（Request） 与 响应（Response） 扮演着至关重要的角色，它们构成了客户端与服务器间互动的根本理念。 请求&#xff0…
阅读更多...
探索海洋世界，基于YOLOv5全系列【n/s/m/l/x】参数模型开发构建海洋场景下海洋生物检测识别分析系统

探索海洋世界，基于YOLOv5全系列【n/s/m/l/x】参数模型开发构建海洋场景下海洋生物检测识别分析系统

前面的博文中，开发实践过海底相关生物检测识别的项目，对于海洋场景下的海洋生物检测则很少有所涉及，这里本文的主要目的就是想要开发构建基于YOLOv5的海洋场景下的海洋生物检测识别系统。 前文相关的开发实践如下，感兴趣的话可以…
阅读更多...
HarmonyOS开发篇—数据管理（分布式数据服务）

HarmonyOS开发篇—数据管理（分布式数据服务）

分布式数据服务概述 分布式数据服务（Distributed Data Service，DDS） 为应用程序提供不同设备间数据库数据分布式的能力。通过调用分布式数据接口，应用程序将数据保存到分布式数据库中。通过结合帐号、应用和数据库三元组&#xf…
阅读更多...
最新文章
推荐文章

Copyright @ 2022~2023