微服务自动化管理初步认识与使用

目录

一、ETCD

1.1、ETCD简介

对于实施工程师：

1.2、特点

1.3. 使用场景

1.4、 关键字

1.5 工作原理

二、ETCD的安装

2.1、下载路径

2.2、介绍

2.3、具体操作

 安装服务端

安装etcd客户端

测试

三、ETCD使用

 3.1、前奏具体操作

3.2、 常用操作

一、ETCD

1.1、ETCD简介

etcd是一个开源的分布式键值存储系统(数据库)，通常用于在分布式系统中存储配置信息、元数据等。它是由CoreOS开发的，基于Raft一致性算法实现高可用性和一致性。etcd提供简单的HTTP API，使得应用程序可以方便地读写存储在其中的键值数据。在Kubernetes等容器编排平台中，etcd通常用于存储集群状态信息。

是CoreOS团队于2013年6月发起的开源项目，它的目标是构建一个高可用的分布式键值(key-value)数据库。

干什么的：是数据库存储数据，监听状态

对于实施工程师：

服务注册于发现，可以做不同宿主机，里面容器互相通信，因为现在服务器不同了一个是Linux一个是Windows他们两通信，所有需要借助etcd完成

1.2、特点

1. 一致性：etcd使用Raft一致性算法来保证集群中数据的一致性，确保数据的可靠性和正确性。

2. 高可用性：etcd支持自动选举和故障转移，即使部分节点故障，集群仍然可以正常运行，保证系统的高可用性。

3. 高性能：etcd使用Go语言编写，具有高效的读写性能，适用于需要快速响应的应用场景。

4. 安全性：etcd支持SSL/TLS加密传输，可以保护数据在网络传输中的安全，同时支持访问控制和认证机制，确保数据的安全性。

5. 简单易用：etcd提供了简单的HTTP API和命令行工具，方便用户进行数据的读写和管理，降低了系统的维护成本。

1、简单的接口，通过标准的HTTP API进行调用，也可以使用官方提供的 etcdctl 操作存储的数据（通信使用）

2、键值对存储

3、有监听机制，可以监听特定键的变化，并作出响应

总的来说，etcd是一个可靠、高效、安全且易用的分布式键值存储系统，适用于构建分布式系统和微服务架构。

监控机制类似之前抖音： 发一个视频----->发消息到注册中心----->监听节点方式变化任务

1.3. 使用场景

  • 服务发现（Service Discovery）（一需要mysql服务，一个找mysql服务，所有他们会去中心找）
  • 消息发布与订阅
  • 负载均衡（多个人找）
  • 分布式通知与协调
  • 分布式锁

1.4、 关键字

Raft：etcd所采用的保证分布式系统强一致性的算法。
Node：一个Raft状态机实例。
Member： 一个etcd实例。它管理着一个Node，并且可以为客户端请求提供服务。
Cluster：由多个Member构成可以协同工作的etcd集群。
Peer：对同一个etcd集群中另外一个Member的称呼。
Client： 向etcd集群发送HTTP请求的客户端。
WAL：预写式日志，etcd用于持久化存储的日志格式。
snapshot：etcd防止WAL文件过多而设置的快照，存储etcd数据状态。
Proxy：etcd的一种模式，为etcd集群提供反向代理服务。
Leader(领导者)：Raft算法中通过竞选而产生的处理所有数据提交的节点。
Follower(跟随者)：竞选失败的节点作为Raft中的从属节点，为算法提供强一致性保证。
Candidate：当Follower超过一定时间接收不到Leader的心跳时转变为Candidate开始Leader竞选。
Term：某个节点成为Leader到下一次竞选开始的时间周期，称为一个Term。
Index：数据项编号。Raft中通过Term和Index来定位数据。

1.5 工作原理


第1部分是HTTP Server： 用于处理用户发送的API请求，以及其它etcd节点的同步与心跳信息请求
第2部分是Store：用于处理etcd支持的各类功能的事务，包括数据索引、节点状态变更、监控与反馈、事件处理与执行等等，是etcd对用户提供的大多数API功能的具体实现
第3部分是Raft：Raft强一致性算法的具体实现，是etcd的核心
第4部分是WAL：Write Ahead Log（预写式日志），是etcd的数据存储方式。除了在内存中存有所有数据的状态以及节点的索引以外，etcd就通过WAL进行持久化存储。
在WAL中，所有的数据提交前都会事先记录日志。Snapshot是为了防止数据过多而进行的状态快照；Entry表示存储的具体日志内容

二、ETCD的安装

2.1、下载路径

  • etcd项目地址：https://github.com/coreos/etcd/
  • etcd下载地址：https://github.com/etcd-io/etcd/releases 根据需要查找对应版本下载即可

2.2、介绍

  • etcd在生产环境中一般推荐集群方式部署
  • etcd使用的2个默认端口号：2379和2380
    2379：用于客户端通信(类似于sqlserver的1433/oracle的1521/mysql的3306)
    2380：用于与集群中的Peer通信
  • 因为etcd是go语言编写的，安装只需要下载对应的二进制文件，并放到合适的路径就行。

2.3、具体操作

1、 创建etc存放路径并切换到下载目录

mkdir /usr/local/mytools && cd /usr/local/mytools

 mytools放etcd工具----安装包

&&：同时执行多个命令

2、下载安装包，并存放到目录上

wget https://github.com/etcd-io/etcd/releases/download/v3.4.3/etcd-v3.4.3-linux-amd64.tar.gz

下载比较慢

3、解压文件到当前目录

 tar xzvf etcd-v3.4.3-linux-amd64.tar.gz

4、进入解压后的文件，查看内容

切换至etcd根目录，运行查看命令ls，里面会有一些文档和2个二进制文件etcd和etcdctl。etcd是server端，etcdctl是客户端

cd etcd-v3.4.3-linux-amd64 && ls

 安装服务端

5、复制到bin，--------------------就安装服务端好了

将etcd和etcdctl二进制文件复制到/usr/local/bin目录, 这样系统中可以直接调用etcd/etcdctl这两个程序

bin：二进制文件

cp etcd etcdctl /usr/local/bin

etcd启动市数据含义 

1.name表示节点名称，默认为default。

2.data-dir 保存日志和快照的目录，默认为当前工作目录default.etcd/目录下。

3.在http://localhost:2380和集群中其他节点通信。

4.在http://localhost:2379提供客户端交互。

5.heartbeat为100ms，该参数的作用是leader多久发送一次心跳到followers，默认值是100ms。

6.election为1000ms，该参数的作用是重新投票的超时时间，如果follow在该时间间隔没有收到心跳包，会触发重新投票，默认为1000ms。

7.snapshot count为10000，该参数的作用是指定有多少事务被提交时，触发截取快照保存到磁盘。

8.集群和每个节点都会生成一个uuid。

9.启动的时候会运行raft，选举出leader

6、查看etcd版本

etcd --version

安装etcd客户端

注意：etct3.4.3默认使用v3命令所以步骤7可省略，之前版本此步骤不可少，例如：v3.3.10

1、配置环境变量

#编辑配置文件
vi /etc/profile

加的内容：

# 最后一行指定etcdctl命令的版本为v3
export ETCDCTL_API=3

i进入编辑模式，ESC :wq退出并保存

2、 刷新环境变量 


source /etc/profile


#查看当前etcdctl的版本信息
#v2版本命令和v3命令是不一样的，例如：
#v2查看版本号
etcdctl -version或 etcdctl -v
#v3查看版本号
etcdctl version
# 更多命令帮助可以查询
etcdctl --help  

测试

#v3查看版本号
etcdctl version

三、ETCD使用

 3.1、前奏具体操作

  1. 建立两个etcd相关目录(即数据文件和配置文件的保存位置，类似mysql里面的data文件夹)
    /etc目录是整个Linux系统的中心，其中包含所有系统管理和维护方面的配置文件，所以etcd的配置也放在这里

1、创建文件夹

创建新的：因为etcd做一个数据库，默认之前安装的服务，不去指定存储路径，所有需要做配置，重新做一个新的etcd服务，所有只具备存储数据功能

mkdir -p /var/lib/etcd/ && mkdir -p /etc/etcd/

lib存数据，etc放配置文件夹 

2、切换到目录中，创建etcd配置文件

cd /etc/etcd/

3、重命名

 配置文件名必须叫etcd.conf

mv etcd-单机版.conf  etcd.conf

4、做成服务

cd /etc/systemd/system

 

5、服务重命名

  配置文件名必须叫etcd.service

mv etcd-单机版.service  etcd.service

7、重新加载systemd服务

systemctl daemon-reload

  

8、设置开机自启动

systemctl enable etcd

9、查看etcd运行状态

systemctl status etcd

10、启动etcd 

systemctl start etcd

 

其他操作：

停止服务
systemctl stop etcd

重启etcd
systemctl restart etcd
 

3.2、 常用操作

1、 如何获取帮助

etcdctl -h

2、put把值放到键里 

etcdctl put /testdir/testkey "Hello world"

 testdir---键

"Hello world"-----值

支持的选项包括
--ttl '0' 该键值的超时时间(单位为秒)，不配置(默认为0)则永不超时
--swap-with-value value 若该键现在的值是value，则进行设置操作
--swap-with-index '0' 若该键现在的索引值是指定索引，则进行设置操作

3、get通过键获取值

etcdctl get /testdir/testkey

--sort 对结果进行排序
--consistent 将请求发给主节点，保证获取内容的一致性。

4、del删除

# 清空数据--清除所有
etcdctl del / --prefix#删除所有/test前缀的节点----清除指定的
etcdctl del /test --prefix

 

5、watch监听

#1. 增加一个key，（客户端窗口1）
etcdctl put key1 "hello"

#2. 打开一个新的客户端窗口2，监听key1的变化
etcdctl watch key1#3. 回到窗口1，向key1 中put新值
etcdctl put key1 "hello work"# 4. 此时可以在窗口2中看到监听输出# 查看版本信息
curl http://127.0.0.1:2379/version

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.rhkb.cn/news/272974.html

如若内容造成侵权/违法违规/事实不符，请联系长河编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

利用GPT开发应用001：GPT基础知识及LLM发展

利用GPT开发应用001：GPT基础知识及LLM发展

文章目录 一、惊艳的GPT二、大语言模型LLMs三、自然语言处理NLP四、大语言模型LLM发展 一、惊艳的GPT 想象一下，您可以与计算机的交流速度与与朋友交流一样快。那会是什么样子？您可以创建哪些应用程序？这正是OpenAI正在助力构建的世界&#x…
阅读更多...
ELFK 分布式日志收集系统

ELFK 分布式日志收集系统

ELFK的组成： Elasticsearch: 它是一个分布式的搜索和分析引擎，它可以用来存储和索引大量的日志数据，并提供强大的搜索和分析功能。 （java语言开发，）logstash: 是一个用于日志收集，处理和传输的…
阅读更多...
Linux系统下使用C++推流多路视频流

Linux系统下使用C++推流多路视频流

先看拉取的视频流效果： 代码如下： 一开始打算使用python写多路视频推流，但在ubuntu系统上搞了好久就是搞不定openh264导致的错误，然后改用c了，代码如下，我这里推了两路视频流，一路是网络摄像头&…
阅读更多...
2024护网面试题精选(二）完

2024护网面试题精选(二）完

0x02. 内网渗透篇 00- 内网渗透的流程 拿到跳板后，先探测一波内网存活主机，用net user /domian命令查看跳板机是否在域 内，探测存活主机、提权、提取hash、进行横向移动，定位dc位置，查看是否有能直接提权域 管的漏洞…
阅读更多...
pytorch什么是梯度

pytorch什么是梯度

目录 1.导数、偏微分、梯度1.1 导数1.2 偏微分1.3 梯度 2. 通过梯度求极小值3. learning rate3. 局部最小值4. Saddle point鞍点 1.导数、偏微分、梯度 1.1 导数 对于yx 2 2 2 的导数，描述了y随x值变化的一个变化趋势，导数是个标量反应的是变化的程度&…
阅读更多...
【HTML】HTML基础7.1（无序列表）

【HTML】HTML基础7.1（无序列表）

目录 标签 属性 效果 注意 标签 <ul> <li>列表里要装的东西</li> <li>列表里要装的东西</li> <li>列表里要装的东西</li> </ul> 属性 type&#xff1a; circle空心圆disc实心圆square方框 效果 circle空心圆效果…
阅读更多...
vi/vim编辑器

vi/vim编辑器

vi/vim编辑器 vi的特点与运用场景vi的使用简易执行一个案例按键说明第一部分&#xff1a;命令模式的按键说明(光标移动、复制粘贴、查找替换)第二部分&#xff1a;命令模式切换到输入模式的可以按键第三部分&#xff1a;命令模式切换到底线命令模式的可用按键 命令行模式的保存…
阅读更多...
【fastllm】学习框架，本地运行，速度还可以，可以成功运行chatglm2模型

【fastllm】学习框架，本地运行，速度还可以，可以成功运行chatglm2模型

1&#xff0c;关于 fastllm 项目 https://www.bilibili.com/video/BV1fx421k7Mz/?vd_source4b290247452adda4e56d84b659b0c8a2 【fastllm】学习框架&#xff0c;本地运行&#xff0c;速度还可以&#xff0c;可以成功运行chatglm2模型 https://github.com/ztxz16/fastllm &am…
阅读更多...
ai学习前瞻-python环境搭建

ai学习前瞻-python环境搭建

python环境搭建 Python环境搭建1. python的安装环境2. MiniConda安装3. pycharm安装4. Jupyter 工具安装5. conda搭建虚拟环境6. 安装python模块pip安装conda安装 7. 关联虚拟环境运行项目 Python环境搭建 1. python的安装环境 ​ python环境安装有4中方式。 从上图可以了解…
阅读更多...
YOLO语义分割标注文件txt还原到图像中

YOLO语义分割标注文件txt还原到图像中

最近做图像分割任务过程中&#xff0c;使用labelme对图像进行标注&#xff0c;得到的数据文件是json&#xff0c;转换为YOLO训练所需的txt格式后&#xff0c;想对标注文件进行检验&#xff0c;即将txt标注文件还原到原图像中&#xff0c;下面是代码&#xff1a; import cv2 im…
阅读更多...
C++指针（五）完结篇

C++指针（五）完结篇

个人主页&#xff1a;PingdiGuo_guo 收录专栏&#xff1a;C干货专栏 前言 相关文章&#xff1a;C指针&#xff08;一&#xff09;、C指针&#xff08;二&#xff09;、C指针&#xff08;三&#xff09;、C指针&#xff08;四&#xff09;万字图文详解&#xff01; 本篇博客是介…
阅读更多...
交易平台开发：构建安全/高效/用户友好的在线交易生态圈

交易平台开发：构建安全/高效/用户友好的在线交易生态圈

在数字化浪潮的推动下&#xff0c;农产品现货大宗商品撮合交易平台已成为连接全球买家与卖家的核心枢纽。随着电子商务的飞速发展&#xff0c;一个安全、高效、用户友好的交易平台对于促进交易、提升用户体验和增加用户黏性至关重要。本文将深入探讨交易平台开发的关键要素&…
阅读更多...
git学习（创建项目提交代码）

git学习（创建项目提交代码）

操作步骤如下 git init //初始化git remote add origin https://gitee.com/aydvvs.git //建立连接git remote -v //查看git add . //添加到暂存区git push 返送到暂存区git status // 查看提交代码git commit -m初次提交git push -u origin "master"//提交远程分支 …
阅读更多...
Pytorch学习 day09（简单神经网络模型的搭建）

Pytorch学习 day09（简单神经网络模型的搭建）

简单神经网络模型的搭建 针对CIFAR 10数据集的神经网络模型结构如下图&#xff1a; 由于上图的结构没有给出具体的padding、stride的值&#xff0c;所以我们需要根据以下公式&#xff0c;手动推算&#xff1a; 注意&#xff1a;当stride太大时&#xff0c;padding也会变得很大…
阅读更多...
视频推拉流EasyDSS平台直播通道重连无法转推的原因排查与解决

视频推拉流EasyDSS平台直播通道重连无法转推的原因排查与解决

视频推拉流EasyDSS视频直播点播平台&#xff0c;集视频直播、点播、转码、管理、录像、检索、时移回看等功能于一体&#xff0c;可提供音视频采集、视频推拉流、播放H.265编码视频、存储、分发等视频能力服务。 用户使用EasyDSS平台对直播通道进行转推&#xff0c;发现只要关闭…
阅读更多...
AOP切面编程，以及自定义注解实现切面

AOP切面编程，以及自定义注解实现切面

AOP切面编程 通知类型表达式重用表达式切面优先级使用注解开发&#xff0c;加上注解实现某些功能 简介 动态代理分为JDK动态代理和cglib动态代理当目标类有接口的情况使用JDK动态代理和cglib动态代理&#xff0c;没有接口时只能使用cglib动态代理JDK动态代理动态生成的代理类…
阅读更多...
【滑动窗口】力扣239.滑动窗口最大值

【滑动窗口】力扣239.滑动窗口最大值

前面的文章我们练习数十道 动态规划 的题目。相信小伙伴们对于动态规划的题目已经写的 得心应手 了。 还没看过的小伙伴赶快关注一下&#xff0c;学习如何 秒杀动态规划 吧&#xff01; 接下来我们开启一个新的篇章 —— 「滑动窗口」。 滑动窗口 滑动窗口 是一种基于 双指…
阅读更多...
03.axios数据提交和错误处理

03.axios数据提交和错误处理

一.axios常用请求方法和数据提交 1. 想要提交数据&#xff0c;先来了解什么是请求方法 请求方法是一些固定单词的英文&#xff0c;例如&#xff1a;GET&#xff0c;POST&#xff0c;PUT&#xff0c;DELETE&#xff0c;PATCH&#xff08;这些都是http协议规定的&#xff09;&am…
阅读更多...
axios的详细使用

axios的详细使用

目录 axios&#xff1a;现代前端开发的HTTP客户端王者 一、axios简介 二、axios的基本用法 1. 安装axios 2. 发起GET请求 3. 发起POST请求 三、axios的高级特性 1. 拦截器 2. 取消请求 3. 自动转换JSON数据 四、axios在前端开发中的应用 五、总结 axios&#xff1a…
阅读更多...
vue中性能优化

vue中性能优化

目录 1. 编码优化 2. 源码优化 3. 打包优化 4. 利用 Vue Devtools 总结 Vue.js 作为一个强大的前端框架&#xff0c;提供了丰富的功能和工具来帮助开发者构建高效的 Web 应用。然而&#xff0c;在开发过程中&#xff0c;性能优化仍然是一个需要关注的问题。以下是对 Vue.j…
阅读更多...
最新文章
推荐文章

Copyright @ 2022~2023