部署 kubeEdge
在线部署
在线方式部署直接执行以下命令,会联网下载需要的安装文件执行安装
$ keadm init --advertise-address={ip} --kubeedge-version={version} --kube-config={config_path},
离线部署
离线准备工作
所有下载操作均在可以联网的机子上进行,然后复制到需要安装的部署机
从 kubeEdge 的官方 git 仓库的 https://github.com/kubeedge/kubeedge/releases 中获取合适的版本的 keadm 和 kubeedge 包,以及校验包
在云端和边端主机上,都执行下面的步骤:
- 将 keadm 压缩包中的可执行文件 keadm 复制到
/usr/local/bin
下 tar -xvf - 将 kubeedge 压缩包(cloudcore和edgecore的二进制文件)放置到
/etc/kubeedge
目录下 - 将 checksum 放置到
/etc/kubeedge
目录下 - 选择合适的版本,从 https://github.com/kubeedge/kubeedge 下载源码
云端 cloudcore
- 复制所需物料到云端主机
- 将源码中
/build/crds
中的所有内容拷贝到云端部署机的 /etc/kubeedge/crds
目录 - 将源码中
/build/tools/cloudcore.service
文件放置到云端部署机的 /etc/kubeedge
目录
- 使用下面的命令初始化 cloudcore
keadm init --advertise-address={ip} --kubeedge-versinotallow={version} --kube-cnotallow={config_path}
- ip 换成 cloudcore 所在的主机 ip
- version 换成自己的安装的版本,因为 keadm 默认版本不一定和我们需要的一样。
- config 路径指向 kubernetes 的配置路径,默认是
/root/.kube/config
,也可设置为 /etc/kubernetes/admin.conf - 如果出现下面的内容,初始化成功
Kubernetes version verification passed, KubeEdge installation will start...
KubeEdge cloudcore is running, For logs visit: /var/log/kubeedge/cloudcore.log
CloudCore started
- 修改 flannel-ds 和 kube-proxy 的配置
- 通过kubectl edit ds -n kube-system kube-flannel-ds修改flannel配置:
- 通过kubectl edit ds -n kube-system kube-proxy修改kube-proxy配置:
- 云端配置文件 cloudcore.yaml
- /etc/kubeedge/config/cloudcore.yaml
边端 edgecore
- 安装 MQTT 服务
- 在边缘节点还需要安装 MQTT 服务,需要以下的 deb 包和依赖:
- 下载 mosquitto 服务端和客户端以及依赖包
$ apt install mosquitto
$ apt install mosquitto-clients
# 连配置卸载:apt autopurge mosquitto
- 安装 apt 增强工具,并下载依赖包
# 创建目录
$ mkdir mosquitto
# apt 增强工具
$ apt install aptitude
# 清理缓存空间
$ aptitude clean
# 只下载依赖且不安装
$ aptitude --download-only install mosquitto
# 将依赖deb从缓存拷贝置创建当前目录
$ mv /var/cache/apt/archives/*.deb ./
- 执行安装
$ dpkg -i ./mosquitto/*.deb
- 配置 MQTT 服务
- 添加配置文件
- 在
/etc/mosquitto/conf.d
目录下,添加配置文件myconfig.conf
配置文件:
sudo vi /etc/mosquitto/conf.d/myconfig.conf
- 粘入下面这些配置
#添加 broker 监听端口(很重要,否则只能本机访问)
listener 1883
#-------------------------------------------
# 如果关闭匿名访问,客户端必须使用用户名密码
allow_anonymous true#指定 用户名-密码 文件
password_file /etc/mosquitto/pwfile.txt
#--------------------------------------------
- 添加账户密码
sudo mosquitto_passwd -c /etc/mosquitto/pwfile.txt <<用户名>>
- 启动mosquitto查看运行状态
sudo service mosquitto start
sudo service mosquitto status
- 在云端运行 keadm gettoken 将返回 token 令牌,该令牌将在加入边缘节点时使用。
- 复制所需物料到边端主机
- 将源码中
./build/tools/edgecore.service
文件复制到边端主机的 /etc/kubeedge
目录 - 通过下面的命令让边端纳入云端管理
$ keadm join --cloudcore-ipport={ip}:{port} --kubeedge-version={version} --token={token}
- 可以通过 journalctl -u edgecore.service -f 查看 edgecore 的日志,或在云端 kubectl get nodes 查看是否能看到我们刚加入的 edge 节点(systemcl status)
- 检查服务状态
service edgecore status
- 导入pause镜像
- 在能联网的机子上拉取 kubeedge/pause:3.1 镜像,使用 docker save -o kubeedge_pause_3.1.tar kubeedge/pause:3.1 命令打包,在边缘节点上,使用 docker load -i kubeedge_pause_3.1.tar 命令导入镜像
- 配置边端配置文件 edgecore.yaml
- /etc/kubeedge/config/edgecore.yaml
edge Pod 实验
如果想要将应用调度到edge端,需要给edge端打上标签后,在应用的yaml文件中进行指定。
kubectl label nodes edge name=edge
根据k8s的这个规则,可以将节点通过 label 的方式进行分组,比如将某几个节点都打上标签为 name=edge,当调度应用到 edge 节点时,会找到 label 为 edge 的所有节点,根据设置的副本数,将应用启动起来,如果设置的副本数超过了设置 edge 标签的节点数,则多出的将会显示 pending 状态,从而无法启动。
编辑应用的 yaml 文件,添加 nodeSelector,下面给出一个例子 nginx.yaml
apiVersion: apps/v1
kind: Deployment
metadata:name: nginx-deploymentlabels:app: nginx
spec:replicas: 1selector:matchLabels:app: nginxtemplate:metadata:labels:app: nginxspec:nodeSelector: ##添加的配置name: "edge" ##打的标签是什么,这里就写什么containers:- name: nginximage: nginx:latestimagePullPolicy: IfNotPresentports:- containerPort: 80hostPort: 80
通过 kubectl get pod -o wide 查看,可看到该pod成功被部署到edge01节点上。
在边缘节点上查看容器 docker ps
启用 kubectl logs 功能
如果不开启此功能,在云端无法通过 kubectl logs 查看边端 pods 的日志
开启云端的 cloudStream 和边端的 edgeStream(websocketde 的另外一个通道10003),通过该通道传递数据
云端支持 Metrics-server
需要复用 kubectl logs 中的 cloudStream 和 edgeStream 的通道
重置部署
清除 keadm init 或 keadm join 造成的影响均可使用 keadm reset,这个操作会删除 /etc/kubeedge 下的文件,如有需要请提前备份。重置操作不会清理 /etc/mosquitto