循环神经网络RNN完全解析:从基础理论到PyTorch实战

目录

  • 一、循环神经网络全解
    • 1.1 什么是循环神经网络
      • 网络结构
      • 工作原理
      • 数学模型
      • RNN的优缺点
      • 总结
    • 1.2 循环神经网络的工作原理
      • RNN的时间展开
      • 数学表述
      • 信息流动
      • 实现示例
      • 梯度问题:梯度消失和爆炸
      • 总结
    • 1.3 循环神经网络的应用场景
      • 文本分析与生成
        • 1.3.1 自然语言处理
        • 1.3.2 机器翻译
        • 1.3.3 文本生成
      • 语音识别与合成
        • 1.3.4 语音到文本
        • 1.3.5 文本到语音
      • 时间序列分析
        • 1.3.6 股票预测
        • 1.3.7 气象预报
      • 视频分析与生成
        • 1.3.8 动作识别
        • 1.3.9 视频生成
      • 总结
  • 循环神经网络的主要变体
    • 2.1 长短时记忆网络(LSTM)
      • LSTM的结构
        • 2.1.1 遗忘门
        • 2.1.2 输入门
        • 2.1.3 单元状态
        • 2.1.4 输出门
      • 数学表述
      • LSTM的实现示例
      • LSTM的优势和挑战
      • 总结
    • 2.2 门控循环单元(GRU)
      • GRU的结构
        • 2.2.1 重置门
        • 2.2.2 更新门
        • 2.2.3 新的记忆内容
      • 数学表述
      • GRU的实现示例
      • GRU的优势和挑战
      • 总结
    • 2.3 双向循环神经网络(Bi-RNN)
      • Bi-RNN的结构
        • 2.3.1 正向层
        • 2.3.2 反向层
      • 信息合并
      • Bi-RNN的实现示例
      • Bi-RNN的应用
      • Bi-RNN与其他RNN结构的结合
      • 总结
  • 三、从代码实现循环神经网络
    • 3.1 环境准备和数据预处理
      • 3.1.1 环境准备
      • 3.1.2 数据预处理
      • 总结
    • 3.2 使用PyTorch构建RNN模型
      • 3.2.1 定义RNN结构
      • 3.2.2 初始化模型
      • 3.2.3 训练模型
      • 3.2.4 模型评估和保存
      • 总结
  • 三、从代码实现循环神经网络
    • 3.3 训练和评估模型
      • 3.3.1 训练模型
        • 3.3.1.1 训练循环
        • 3.3.1.2 监控训练进度
      • 3.3.2 评估模型
        • 3.3.2.1 验证集评估
        • 3.3.2.2 测试集评估
        • 3.3.2.3 模型指标
      • 3.3.3 超参数调优
      • 总结
  • 四、总结
    • 4.1 循环神经网络(RNN)
    • 4.2 RNN的高级变体
    • 4.3 代码实现
    • 4.4 结语

在本文中,我们深入探讨了循环神经网络(RNN)及其高级变体,包括长短时记忆网络(LSTM)、门控循环单元(GRU)和双向循环神经网络(Bi-RNN)。文章详细介绍了RNN的基本概念、工作原理和应用场景,同时提供了使用PyTorch构建、训练和评估RNN模型的完整代码指南。

作者 TechLead,拥有10+年互联网服务架构、AI产品研发经验、团队管理经验,同济本复旦硕,复旦机器人智能实验室成员,阿里云认证的资深架构师,项目管理专业人士,上亿营收AI产品研发负责人。

file

一、循环神经网络全解

1.1 什么是循环神经网络

循环神经网络(Recurrent Neural Network, RNN)是一类具有内部环状连接的人工神经网络,用于处理序列数据。其最大特点是网络中存在着环,使得信息能在网络中进行循环,实现对序列信息的存储和处理。

file

网络结构

RNN的基本结构如下:

# 一个简单的RNN结构示例
class SimpleRNN(nn.Module):def __init__(self, input_size, hidden_size):super(SimpleRNN, self).__init__()self.rnn = nn.RNN(input_size, hidden_size, batch_first=True)def forward(self, x):out, _ = self.rnn(x)return out

工作原理

file

  1. 输入层:RNN能够接受一个输入序列(例如文字、股票价格、语音信号等)并将其传递到隐藏层。

  2. 隐藏层:隐藏层之间存在循环连接,使得网络能够维护一个“记忆”状态,这一状态包含了过去的信息。这使得RNN能够理解序列中的上下文信息。

  3. 输出层:RNN可以有一个或多个输出,例如在序列生成任务中,每个时间步都会有一个输出。

数学模型

RNN的工作原理可以通过以下数学方程表示:

  • 输入到隐藏层的转换:[ h_t = \tanh(W_{ih} \cdot x_t + b_{ih} + W_{hh} \cdot h_{t-1} + b_{hh}) ]
  • 隐藏层到输出层的转换:[ y_t = W_{ho} \cdot h_t + b_o ]

其中,( h_t ) 表示在时间 ( t ) 的隐藏层状态,( x_t ) 表示在时间 ( t ) 的输入,( y_t ) 表示在时间 ( t ) 的输出。

RNN的优缺点

优点

  • 能够处理不同长度的序列数据。
  • 能够捕捉序列中的时间依赖关系。

缺点

  • 对长序列的记忆能力较弱,可能出现梯度消失或梯度爆炸问题。
  • 训练可能相对复杂和时间消耗大。

总结

循环神经网络是一种强大的模型,特别适合于处理具有时间依赖性的序列数据。然而,标准RNN通常难以学习长序列中的依赖关系,因此有了更多复杂的变体如LSTM和GRU,来解决这些问题。不过,RNN的基本理念和结构仍然是深度学习中序列处理的核心组成部分。

1.2 循环神经网络的工作原理

循环神经网络(RNN)的工作原理是通过网络中的环状连接捕获序列中的时间依赖关系。下面我们将详细解释其工作机制。

RNN的时间展开

RNN的一个重要特点是可以通过时间展开来理解。这意味着,虽然网络结构在每个时间步看起来相同,但我们可以将其展开为一系列的网络层,每一层对应于序列中的一个特定时间步。

数学表述

file

RNN可以通过下列数学方程描述:

  • 隐藏层状态:[ h_t = \sigma(W_{hh} \cdot h_{t-1} + W_{ih} \cdot x_t + b_h) ]
  • 输出层状态:[ y_t = W_{ho} \cdot h_t + b_o ]

其中,( \sigma ) 是一个激活函数(如tanh或ReLU),( h_t ) 是当前隐藏状态,( x_t ) 是当前输入,( y_t ) 是当前输出。权重和偏置分别由( W_{hh}, W_{ih}, W_{ho} ) 和 ( b_h, b_o ) 表示。

信息流动

file

  1. 输入到隐藏:每个时间步,RNN从输入层接收一个新的输入,并将其与之前的隐藏状态结合起来,以生成新的隐藏状态。

  2. 隐藏到隐藏:隐藏层之间的循环连接使得信息可以在时间步之间传播,从而捕捉序列中的依赖关系。

  3. 隐藏到输出:每个时间步的隐藏状态都会传递到输出层,以生成对应的输出。

实现示例

# RNN的PyTorch实现
import torch.nn as nnclass SimpleRNN(nn.Module):def __init__(self, input_size, hidden_size, output_size):super(SimpleRNN, self).__init__()self.rnn = nn.RNN(input_size, hidden_size, batch_first=True)self.fc = nn.Linear(hidden_size, output_size)def forward(self, x, h_0):out, h_n = self.rnn(x, h_0) # 运用RNN层out = self.fc(out) # 运用全连接层return out

梯度问题:梯度消失和爆炸

由于RNN的循环结构,在训练中可能会出现梯度消失或梯度爆炸的问题。长序列可能会导致训练过程中的梯度变得非常小(消失)或非常大(爆炸),从而影响模型的学习效率。

总结

循环神经网络的工作原理强调了序列数据的时间依赖关系。通过时间展开和信息的连续流动,RNN能够理解和处理序列中的复杂模式。不过,RNN的训练可能受到梯度消失或爆炸的挑战,需要采用适当的技术和结构来克服。

1.3 循环神经网络的应用场景

循环神经网络(RNN)因其在捕获序列数据中的时序依赖性方面的优势,在许多应用场景中都得到了广泛的使用。以下是一些主要应用领域的概述:
file

文本分析与生成

1.3.1 自然语言处理

RNN可用于词性标注、命名实体识别、句子解析等任务。通过捕获文本中的上下文关系,RNN能够理解并处理语言的复杂结构。

1.3.2 机器翻译

RNN能够理解和生成不同语言的句子结构,使其在机器翻译方面特别有效。

1.3.3 文本生成

利用RNN进行文本生成,如生成诗歌、故事等,实现了机器的创造性写作。

语音识别与合成

1.3.4 语音到文本

RNN可以用于将语音信号转换为文字,即语音识别(Speech to Text),理解声音中的时序依赖关系。

1.3.5 文本到语音

RNN也用于文本到语音(Text to Speech)的转换,生成流畅自然的语音。

时间序列分析

1.3.6 股票预测

通过分析历史股票价格和交易量等数据的时间序列,RNN可以用于预测未来的股票走势。

1.3.7 气象预报

RNN通过分析气象数据的时间序列,可以预测未来的天气情况。

视频分析与生成

1.3.8 动作识别

RNN能够分析视频中的时序信息,用于识别人物动作和行为模式等。

1.3.9 视频生成

RNN还可以用于视频内容的生成,如生成具有连续逻辑的动画片段。

总结

RNN的这些应用场景共同反映了其在理解和处理具有时序依赖关系的序列数据方面的强大能力。无论是自然语言处理、语音识别、时间序列分析,还是视频内容分析,RNN都已成为实现这些任务的重要工具。其在捕获长期依赖、理解复杂结构和生成连续序列方面的特性,使其成为深度学习中处理序列问题的首选方法。

循环神经网络的主要变体

2.1 长短时记忆网络(LSTM)

file
file
长短时记忆网络(Long Short-Term Memory,LSTM)是一种特殊的RNN结构,由Hochreiter和Schmidhuber在1997年提出。LSTM旨在解决传统RNN在训练长序列时遇到的梯度消失问题。

LSTM的结构

LSTM的核心是其复杂的记忆单元结构,包括以下组件:

2.1.1 遗忘门

控制哪些信息从单元状态中被丢弃。

2.1.2 输入门

控制新信息的哪些部分要存储在单元状态中。

2.1.3 单元状态

储存过去的信息,通过遗忘门和输入门的调节进行更新。

2.1.4 输出门

控制单元状态的哪些部分要读取和输出。

数学表述

LSTM的工作过程可以通过以下方程表示:

  1. 遗忘门
    [ f_t = \sigma(W_f \cdot [h_{t-1}, x_t] + b_f) ]

  2. 输入门
    [ i_t = \sigma(W_i \cdot [h_{t-1}, x_t] + b_i) ]

  3. 候选单元状态
    [ \tilde{C}t = \text{tanh}(W_C \cdot [h{t-1}, x_t] + b_C) ]

  4. 更新单元状态
    [ C_t = f_t \cdot C_{t-1} + i_t \cdot \tilde{C}_t ]

  5. 输出门
    [ o_t = \sigma(W_o \cdot [h_{t-1}, x_t] + b_o) ]

  6. 隐藏状态
    [ h_t = o_t \cdot \text{tanh}(C_t) ]

其中,( \sigma ) 表示sigmoid激活函数。

LSTM的实现示例

# LSTM的PyTorch实现
import torch.nn as nnclass LSTM(nn.Module):def __init__(self, input_size, hidden_size, output_size):super(LSTM, self).__init__()self.lstm = nn.LSTM(input_size, hidden_size, batch_first=True)self.fc = nn.Linear(hidden_size, output_size)def forward(self, x, (h_0, c_0)):out, (h_n, c_n) = self.lstm(x, (h_0, c_0)) # 运用LSTM层out = self.fc(out) # 运用全连接层return out

LSTM的优势和挑战

LSTM通过引入复杂的门控机制解决了梯度消失的问题,使其能够捕获更长的序列依赖关系。然而,LSTM的复杂结构也使其在计算和参数方面相对昂贵。

总结

长短时记忆网络(LSTM)是循环神经网络的重要扩展,具有捕获长序列依赖关系的能力。通过引入门控机制,LSTM可以精细控制信息的流动,既能记住长期的依赖信息,也能忘记无关的细节。这些特性使LSTM在许多序列处理任务中都得到了广泛的应用。

2.2 门控循环单元(GRU)

门控循环单元(Gated Recurrent Unit,GRU)是一种特殊的RNN结构,由Cho等人于2014年提出。GRU与LSTM相似,但其结构更简单,计算效率更高。
file

GRU的结构

GRU通过将忘记和输入门合并,减少了LSTM的复杂性。GRU的结构主要由以下组件构成:

2.2.1 重置门

控制过去的隐藏状态的哪些信息应该被忽略。

2.2.2 更新门

控制隐藏状态的哪些部分应该被更新。

2.2.3 新的记忆内容

计算新的候选隐藏状态,可能会与当前隐藏状态结合。

数学表述

GRU的工作过程可以通过以下方程表示:

  1. 重置门
    [ r_t = \sigma(W_r \cdot [h_{t-1}, x_t] + b_r) ]

  2. 更新门
    [ z_t = \sigma(W_z \cdot [h_{t-1}, x_t] + b_z) ]

  3. 新的记忆内容
    [ \tilde{h}t = \text{tanh}(W \cdot [r_t \odot h{t-1}, x_t] + b) ]

  4. 最终隐藏状态
    [ h_t = (1 - z_t) \cdot h_{t-1} + z_t \cdot \tilde{h}_t ]

其中,( \sigma ) 表示sigmoid激活函数,( \odot ) 表示逐元素乘法。

GRU的实现示例

# GRU的PyTorch实现
import torch.nn as nnclass GRU(nn.Module):def __init__(self, input_size, hidden_size, output_size):super(GRU, self).__init__()self.gru = nn.GRU(input_size, hidden_size, batch_first=True)self.fc = nn.Linear(hidden_size, output_size)def forward(self, x, h_0):out, h_n = self.gru(x, h_0) # 运用GRU层out = self.fc(out) # 运用全连接层return out

GRU的优势和挑战

GRU提供了与LSTM类似的性能,但结构更简单,因此在计算和参数方面相对更有效率。然而,这种简化可能会在某些任务中牺牲一些表现力。

总结

门控循环单元(GRU)是一种有效的RNN结构,旨在捕获序列数据中的时序依赖关系。与LSTM相比,GRU具有更高的计算效率,同时仍保持了良好的性能。其在许多序列处理任务中的应用,如自然语言处理、语音识别等,进一步证明了其作为一种重要的深度学习工具的地位。

2.3 双向循环神经网络(Bi-RNN)

双向循环神经网络(Bidirectional Recurrent Neural Network,Bi-RNN)是一种能够捕获序列数据前后依赖关系的RNN架构。通过结合正向和反向的信息流,Bi-RNN可以更全面地理解序列中的模式。
file

Bi-RNN的结构

Bi-RNN由两个独立的RNN层组成,一个正向层和一个反向层。这两个层分别处理输入序列的正向和反向版本。

2.3.1 正向层

处理输入序列从第一个元素到最后一个元素。

2.3.2 反向层

处理输入序列从最后一个元素到第一个元素。

信息合并

正向和反向层的隐藏状态通常通过连接或其他合并方式结合在一起,以形成最终的隐藏状态。

Bi-RNN的实现示例

以下代码展示了使用PyTorch构建Bi-RNN的方法:

# Bi-RNN的PyTorch实现
import torch.nn as nnclass BiRNN(nn.Module):def __init__(self, input_size, hidden_size, output_size):super(BiRNN, self).__init__()self.rnn = nn.RNN(input_size, hidden_size, batch_first=True, bidirectional=True)self.fc = nn.Linear(hidden_size * 2, output_size)def forward(self, x):out, _ = self.rnn(x) # 运用双向RNN层out = self.fc(out)  # 运用全连接层return out

Bi-RNN的应用

Bi-RNN在许多涉及序列分析的任务中非常有效,例如:

  • 自然语言处理:通过捕获上下文信息,增强了对句子结构的理解。
  • 语音识别:通过分析语音信号的前后依赖关系,提高了识别准确性。

Bi-RNN与其他RNN结构的结合

Bi-RNN可以与其他RNN结构(例如LSTM和GRU)相结合,进一步增强其能力。

总结

双向循环神经网络(Bi-RNN)通过同时分析序列的前向和反向信息,实现了对序列数据更深入的理解。其在诸如自然语言处理和语音识别等复杂任务中的成功应用,显示了Bi-RNN作为一种强大的深度学习模型的潜力和灵活性。

三、从代码实现循环神经网络

3.1 环境准备和数据预处理

为了成功实现循环神经网络,需要首先准备开发环境,并对数据进行适当的预处理。下面将详细介绍每个阶段的步骤。

3.1.1 环境准备

环境准备主要包括选择合适的编程语言、深度学习框架、硬件环境等。

  1. 编程语言:Python是深度学习中广泛使用的语言,有丰富的库和社区支持。
  2. 深度学习框架:PyTorch是一种流行的开源框架,具有强大的灵活性和易用性。
  3. 硬件要求:GPU加速通常可以显著提高训练速度。
# 安装PyTorch
!pip install torch torchvision

3.1.2 数据预处理

数据预处理是机器学习项目中的关键步骤,可以显著影响模型的性能。

  1. 数据加载:首先加载所需的数据集。
  2. 数据清洗:删除或替换缺失、重复或错误的值。
  3. 文本分词:如果是NLP任务,需要对文本进行分词处理。
  4. 序列填充:确保输入序列具有相同的长度。
  5. 归一化:对特征进行标准化处理。
  6. 数据分割:将数据分为训练集、验证集和测试集。

以下是数据预处理的示例代码:

# 用于数据预处理的PyTorch代码
from torch.utils.data import DataLoader
from torchvision import transforms# 定义转换
transform = transforms.Compose([transforms.ToTensor(),transforms.Normalize(mean=[0.5], std=[0.5]),
])# 加载数据集
train_dataset = CustomDataset(transform=transform)
train_loader = DataLoader(train_dataset, batch_size=32, shuffle=True)

总结

环境准备和数据预处理是循环神经网络实现过程中的基础阶段。选择合适的工具和硬件,并对数据进行适当的清洗和转换,是确保项目成功的关键。与此同时,使用合适的数据预处理技术可以显著提高模型的性能和稳定性。通过本节的介绍,读者应能够理解并实现循环神经网络所需的环境准备和数据预处理步骤。

3.2 使用PyTorch构建RNN模型

PyTorch是一种流行的深度学习框架,广泛用于构建和训练神经网络模型。在本节中,我们将介绍如何使用PyTorch构建基本的RNN模型。

3.2.1 定义RNN结构

RNN模型由输入层、隐藏层和输出层组成。以下是构建RNN的代码示例:

import torch.nn as nnclass SimpleRNN(nn.Module):def __init__(self, input_size, hidden_size, output_size):super(SimpleRNN, self).__init__()self.rnn = nn.RNN(input_size, hidden_size, batch_first=True)self.fc = nn.Linear(hidden_size, output_size)def forward(self, x):out, _ = self.rnn(x)out = self.fc(out)return out

这里,input_size表示输入特征的数量,hidden_size表示隐藏层神经元的数量,output_size表示输出层神经元的数量。

3.2.2 初始化模型

初始化模型涉及设置其参数和选择优化器与损失函数。

model = SimpleRNN(input_size=10, hidden_size=20, output_size=1)
optimizer = torch.optim.Adam(model.parameters(), lr=0.001)
criterion = nn.MSELoss()

3.2.3 训练模型

训练模型包括以下步骤:

  1. 前向传播:通过模型传递输入数据并计算输出。
  2. 计算损失:使用预测输出和实际目标计算损失。
  3. 反向传播:根据损失计算梯度。
  4. 优化器步骤:更新模型权重。
# 训练循环示例
for epoch in range(epochs):for batch in train_loader:inputs, targets = batchoutputs = model(inputs)loss = criterion(outputs, targets)optimizer.zero_grad()loss.backward()optimizer.step()

3.2.4 模型评估和保存

通过在验证集或测试集上评估模型,您可以了解其泛化性能。一旦满意,可以保存模型供以后使用。

# 保存模型
torch.save(model.state_dict(), 'model.pth')

总结

使用PyTorch构建RNN模型涉及多个步骤,包括定义模型结构、初始化、训练和评估。本节通过详细的代码示例和解释为读者提供了一个全面的指南,可以用来构建自己的RNN模型。在理解了基本的RNN之后,读者还可以进一步探索更复杂的变体,如LSTM、GRU和双向RNN。

三、从代码实现循环神经网络

file

3.3 训练和评估模型

训练和评估模型是深度学习工作流程的核心部分。本节将详细介绍如何使用PyTorch进行RNN模型的训练和评估。

3.3.1 训练模型

3.3.1.1 训练循环

训练循环是重复的过程,包括前向传播、损失计算、反向传播和优化权重。以下是典型的训练循环代码:

for epoch in range(epochs):for batch in train_loader:inputs, targets = batchoutputs = model(inputs)loss = criterion(outputs, targets)optimizer.zero_grad()loss.backward()optimizer.step()print(f'Epoch {epoch + 1}/{epochs}, Loss: {loss.item()}')

3.3.1.2 监控训练进度

通常使用验证集监控模型的训练进度,并使用如TensorBoard等工具可视化训练和验证损失。

3.3.2 评估模型

3.3.2.1 验证集评估

在验证集上评估模型可以了解模型在未见过的数据上的性能。

model.eval()
with torch.no_grad():for batch in val_loader:inputs, targets = batchoutputs = model(inputs)val_loss += criterion(outputs, targets).item()
print(f'Validation Loss: {val_loss/len(val_loader)}')

3.3.2.2 测试集评估

在测试集上的评估为您提供了模型在实际应用场景下可能的性能。

3.3.2.3 模型指标

除了损失外,还可以计算其他重要指标,例如准确率、精确度、召回率等。

3.3.3 超参数调优

超参数调优涉及使用诸如Grid Search或Random Search的技术来找到最佳超参数组合。

总结

训练和评估模型是深度学习项目的核心阶段。本节详细介绍了如何使用PyTorch进行训练循环、监控训练进度、评估模型、计算性能指标以及超参数调优。通过了解这些关键概念和技术,读者可以有效地训练和评估RNN模型,为实际应用做好准备。

四、总结

file
在本系列博客中,我们详细探讨了循环神经网络(RNN)的各个方面。以下是重要内容的总结:

4.1 循环神经网络(RNN)

我们介绍了RNN的基本结构和工作原理,以及它如何捕捉序列数据中的时间依赖关系。然后,我们深入了解了各种RNN的应用场景,涵盖了自然语言处理、时间序列分析等领域。

4.2 RNN的高级变体

  • 长短时记忆网络(LSTM):解决了RNN长序列训练中的梯度消失和爆炸问题。
  • 门控循环单元(GRU):与LSTM相似,但结构更简单。
  • 双向循环神经网络(Bi-RNN):通过同时考虑过去和未来的信息,增强了序列建模的能力。

4.3 代码实现

  • 环境准备和数据预处理:介绍了如何准备数据和环境。
  • 使用PyTorch构建RNN模型:详细解释了如何使用PyTorch构建和训练RNN模型。
  • 训练和评估模型:描述了完整的训练和评估流程,包括超参数调优和模型性能评估。

4.4 结语

通过深入了解RNN及其变体、理解它们的工作原理、掌握使用PyTorch进行实现的技巧,读者可以充分利用RNN在复杂序列数据分析方面的强大功能。这种知识不仅可用于当前的项目,还为未来的研究和开发工作奠定了坚实的基础。循环神经网络是深度学习中的一个重要分支,通过不断探索和学习,我们可以继续推动这一领域的创新和进展。

作者 TechLead,拥有10+年互联网服务架构、AI产品研发经验、团队管理经验,同济本复旦硕,复旦机器人智能实验室成员,阿里云认证的资深架构师,项目管理专业人士,上亿营收AI产品研发负责人。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/98817.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

unity打造路径编辑与导航系统

Unity是一款非常流行的游戏引擎,它提供了丰富的工具和API,方便开发者快速创建游戏。其中,路径编辑与导航系统是游戏开发中非常重要的一部分,可以帮助玩家更好地探索游戏世界,提升游戏体验。本文将详细介绍如何在Unity中…

C#与西门子PLC1500的ModbusTcp服务器通信2--ModbusTcp协议

Modbus TCP是近年来越来越流行的工业控制系统通信协议之一,与其他通信协议相比,Modbus TCP通信速度快、可靠性高、兼容性强、适用于模拟或数字量信号的传输,阅读本文前你必须比较熟悉Modbus协议,了解tcp网络。 一、什么是Modbus …

自动驾驶合成数据科普一:不做真实数据的“颠覆者”,做“杠杆”

前言: 在7月底的一篇文章中,九章智驾提到,数据闭环能力是自动驾驶下半场的“入场券”,这一观点在行业内引起了广泛共鸣。 在数据闭环体系中,仿真技术无疑是非常关键的一环。仿真的起点是数据,而数据又分为真…

Linux网络编程:网络基础

文章目录: 一:协议 二:网络应用设计模式_BS模式和CS模式 三:网络分层模型(OSI七层 TCP/IP四层) 四:通信过程 五:协议格式 1.数据包封装 2.以太网帧格式和ARP数据报格式 …

【HarmonyOS】【DevEco Studio】ohpm安装失败该如何解决?

【关键词】 HarmonyOS、DevEco Studio、ohpm安装失败 【问题背景及解决方案】 最近遇到很多DevEco Studio安装ohpm失败的问题,下面给大家介绍几种出现的问题以及解决方案: 1、ohpm not set up,报错截图如下: ​ 解决方案&…

基于YOLOv8模型和PCB电子线路板缺陷目标检测系统(PyTorch+Pyside6+YOLOv8模型)

摘要:基于YOLOv8模型PCB电子线路板缺陷目标检测系统可用于日常生活中检测与定位PCB线路板瑕疵,利用深度学习算法可实现图片、视频、摄像头等方式的目标检测,另外本系统还支持图片、视频等格式的结果可视化与结果导出。本系统采用YOLOv8目标检…

❤ 全面解析若依框架vue2版本(springboot-vue前后分离--前端部分)

❤ 解析若依框架之前台修改 1、修改页面标题和logo 修改网页上的logo ruoyi-ui --> public --> favicon.ico,把这个图片换成你自己的logo 修改网页标题 根目录下的vue.config.js const name process.env.VUE_APP_TITLE || ‘若依管理系统’ // 网页标题 换成…

基于ssm的CRM客户管理系统(spring + springMVC + mybatis)营销业务信息java jsp源代码

本项目为前几天收费帮学妹做的一个项目,Java EE JSP项目,在工作环境中基本使用不到,但是很多学校把这个当作编程入门的项目来做,故分享出本项目供初学者参考。 一、项目描述 基于ssm的CRM客户管理系统(spring spring…

通过postgresql的Ltree字段类型实现目录结构的基本操作

通过postgresql的Ltree字段类型实现目录结构的基本操作 将这种具有目录结构的excel表存储到数据库中,可以采用树型结构存储 DROP TABLE IF EXISTS "public"."directory_tree"; CREATE TABLE "public"."directory_tree" (…

【李沐】3.5、softmax回归的从0开始实现

注意: 把每个像素位置看作⼀个特征 # 导入PyTorch库 import torch # 从IPython库中导入display模块,用于在交互式环境中显示内容 from IPython import display # 从d2l.torch模块中导入torch作为d2l的别名,方便后续使用d2l库中的功能 from d…

rabbitMq安装后无法启动可视化页面http://localhost:15672处理

本次安装环境信息: 系统:win10 64位专业版 erlang:otp_win64_23.0 rabbitMQ:rabbitmq-server-3.8.5 安装rabbitMQ需要依赖erlang语言环境,所以需要我们下载erlang的环境安装程序。 一、下载安装程序 rabbitMQ安装…

UGUI可视化组件Image, RawImage

一.组件Image 1.1 Image的属性 创建的Image对象自带Image组件,用来显示图片,其属性说明如下 属性:功能:Source Image表示要显示的图像的纹理(必须作为精灵导入)。Color要应用于图像的颜色,会和…

Matlab论文插图绘制模板第108期—特征渲染的标签散点图

在之前的文章中,分享了Matlab标签散点图的绘制模板: 进一步,再来分享一下特征渲染的标签散点图的绘制模板,以便再添加一个维度的信息。 先来看一下成品效果: 特别提示:本期内容『数据代码』已上传资源群中…

Vue-13.创建完整的Vue项目(vue+vue-cli+js)-1

前言 之前写了命令创建Vue项目,但是事实上我们可以直接用编译器直接创建项目,这里我使用webstorm(因为我是前后端兼修的所以我习惯使用Idea家族的编译器) 只写前端的推荐用VsCode前后端都写的推荐用webstorm 新建项目 项目初始…

框架分析(1)-IT人必须会

框架分析(1)-IT人必须会 专栏介绍当今主流框架前端框架后端框架移动应用框架数据库框架测试框架 Angular关键特点和功能:组件化架构双向数据绑定依赖注入路由功能强大的模板语法测试友好 优缺点分析优点缺点 总结 专栏介绍 link 主要对目前市…

爱荷华州的一个学区正在使用ChatGPT来决定禁止哪些书籍

为了响应爱荷华州最近颁布的立法,管理员们正在从梅森市学校图书馆移除禁书,官员们正在使用ChatGPT帮助他们挑选书籍,根据公报和大众科学. 由州长金雷诺兹签署的禁令背后的新法律是教育改革浪潮的一部分,共和党立法者认为这是保护…

JVM性能分析-jstat工具观察gc频率

jstat jstat是java自带的工具&#xff0c;在bin目录下 用法 语法&#xff1a;jstat -<option> [-t] [-h<lines>] <vmid> [<interval> [<count>]] [kqkyyj-2 bin]$ jstat -help Usage: jstat -help|-optionsjstat -<option> [-t] [-h&l…

Servlet+Jsp+JDBC实现房屋租赁管理系统(源码+数据库+论文+系统详细配置指导+ppt)

一、项目简介 本项目是一套基于ServletJsp房屋租赁管理系统&#xff0c;主要针对计算机相关专业的正在做毕设的学生与需要项目实战练习的Java学习者。 包含&#xff1a;项目源码、数据库脚本等&#xff0c;该项目附带全部源码可作为毕设使用。 项目都经过严格调试&#xff0c;…

redis-数据类型及样例

一.string 类型数据的基本操作 1.添加/修改数据 set key value2.获取数据 get key3.删除数据 del key4.添加/修改多个数据 mset key1 value1 key2 value25.获取多个数据 mget key1 key2二.list类型的基本操作 数据存储需求&#xff1a;存储多个数据&#xff0c;并对数据…

MySQL8.0.26-Linux版安装

MySQL8.0.26-Linux版安装 1. 准备一台Linux服务器 云服务器或者虚拟机都可以; Linux的版本为 CentOS7; 2. 下载Linux版MySQL安装包 MySQL :: Download MySQL Community Server (Archived Versions) 3. 上传MySQL安装包 4. 创建目录,并解压 mkdir mysql ​ tar -xvf mysql-8…