k8s 部署polardb-x集群

前言

体验了基于源码构建的部署polardb-x 单机部署，当然也想体验性能更好的完全分布式集群。这边文章将重点介绍如何部署polardb-x集群

简介

PolarDB-X 是一款面向超高并发、海量存储、复杂查询场景设计的云原生分布式数据库系统。其采用 Shared-nothing 与存储计算分离架构，支持水平扩展、分布式事务、混合负载等能力，具备企业级、云原生、高可用、高度兼容 MySQL 系统及生态等特点。

PolarDB-X 最初为解决阿里巴巴天猫“双十一”核心交易系统数据库扩展性瓶颈而生，之后伴随阿里云一路成长，是一款经过多种核心业务场景验证的、成熟稳定的数据库系统。 PolarDB-X 的核心特性如下：

水平扩展
PolarDB-X 采用 Shared-nothing 架构进行设计，支持多种 Hash 和 Range 数据拆分算法，通过隐式主键拆分和数据分片动态调度，实现系统的透明水平扩展。

分布式事务
PolarDB-X 采用 MVCC + TSO 方案及 2PC 协议实现分布式事务。事务满足 ACID 特性，支持 RC/RR 隔离级别，并通过一阶段提交、只读事务、异步提交等优化实现事务的高性能。

混合负载
PolarDB-X 通过原生 MPP 能力实现对分析型查询的支持，通过 CPU quota 约束、内存池化、存储资源分离等实现了 OLTP 与 OLAP 流量的强隔离。

企业级
PolarDB-X 为企业场景设计了诸多内核能力，例如 SQL 限流、SQL Advisor、TDE、三权分立、Flashback Query 等。

云原生
PolarDB-X 在阿里云上有多年的云原生实践，支持通过 K8S Operator 管理集群资源，支持公有云、混合云、专有云等多种形态进行部署，并支持国产化操作系统和芯片。

高可用
通过多数派 Paxos 协议实现数据强一致，支持两地三中心、三地五副本等多种容灾方式，同时通过 Table Group、Geo-locality 等提高系统可用性。

兼容 MySQL 系统及生态
PolarDB-X 的目标是完全兼容 MySQL ，目前兼容的内容包括 MySQL 协议、MySQL 大部分语法、Collation、事务隔离级别、Binlog 等。

集群部署方案

集群部署方案主要有两个

  • PXD 部署
  • k8s部署

鉴于便捷性，这是我们使用k8s部署

k8s 部署polardb-x集群

1. 环境准备

  • 安装 Helm 已经配置环境变量
  • k8s 集群
  • 良好的网络环境

2. 安装 PolarDB-X Operator

  • 在 Helm 仓库中添加 PolarDB-X 相关网址：

    helm repo add polardbx https://polardbx-charts.oss-cn-beijing.aliyuncs.com

  • 检查已发布的 PolarDB-X Operator 版本：

    helm search repo polardbx/polardbx-operator -l

    推荐安装最新版本，例如：v1.6.2。

  • 创建 polardbx-operator-system 命名空间：

    kubectl create namespace polardbx-operator-system

  • 用以下 Helm 命令安装 v1.6.2：

    helm install --namespace polardbx-operator-system \--set node.volumes.data=/polarx/data --set imageRepo=registry:5000 \--set extension.config.images.store.galaxy.exporter=register:5000/mysqld-exporter:master \--version 1.6.2 \polardbx-operator polardbx/polardbx-operator

  • 检查容器启动是否成功：

    kubectl get pods -n polardbx-operator-system

    如果pod的状态都处于running 就说明PolarDB-X Operator 安装成功了

在这里插入图片描述

3. 部署polardb-x集群

3.1 准备yaml

  • 首先执行如下命令获取 PolarDB-X 各个组件的最新镜像版本（需要填入YAML文件）：

    curl -s "https://polardbx-opensource.oss-cn-hangzhou.aliyuncs.com/scripts/get-version.sh" | sh

  • 输出内容 以2.4版本为例

    CN polardbx/polardbx-sql:v2.4.0_5.4.19
DN polardbx/polardbx-engine:v2.4.0_8.4.19
CDC polardbx/polardbx-cdc:v2.4.0_5.4.19
COLUMNAR polardbx/polardbx-columnar:v2.4.0_5.4.19

  • 编写 yaml文件

    vi polardbx_cluster.yaml

  • yaml 内容如下
    和官方配置文件不同的是，这里使用了polardbx-opensource-registry.cn-beijing.cr.aliyuncs.com/polardbx 镜像仓库地址，而不是默认的，避免因为网络问题拉取不到镜像。如果自带梯子可直接将镜像替换成官方推荐的地址 例如 把 polardbx-opensource-registry.cn-beijing.cr.aliyuncs.com/polardbx/替换为polardbx/

    apiVersion: polardbx.aliyun.com/v1
kind: PolarDBXCluster
metadata:name: polardbx-cluster
spec:topology:nodes:gms:template:image: polardbx-opensource-registry.cn-beijing.cr.aliyuncs.com/polardbx/polardbx-engine:v2.4.0_8.4.19resources:requests:cpu: 1memory: 4Gilimits:cpu: 1memory: 4Gicn:replicas: 2template:image: polardbx-opensource-registry.cn-beijing.cr.aliyuncs.com/polardbx/polardbx-sql:v2.4.0_5.4.19resources:requests:cpu: 2memory: 4Gilimits:cpu: 2memory: 4Gidn:replicas: 3template:image: polardbx-opensource-registry.cn-beijing.cr.aliyuncs.com/polardbx/polardbx-engine:v2.4.0_8.4.19resources:requests:cpu: 2memory: 8Gilimits:cpu: 2memory: 8Gicdc:replicas: 1template:image: polardbx-opensource-registry.cn-beijing.cr.aliyuncs.com/polardbx/polardbx-cdc:v2.4.0_5.4.19resources:requests:cpu: 1memory: 4Gilimits:cpu: 2memory: 4Gi
3.2 镜像提前下载（推荐 因为镜像都比较大 推荐提前下载）

在k8s1.20 以后 运行时环境被替换为了 Containerd 故使用 工具拉取镜像

crictl pull polardbx-opensource-registry.cn-beijing.cr.aliyuncs.com/polardbx/polardbx-engine:v2.4.0_8.4.19
crictl pull polardbx-opensource-registry.cn-beijing.cr.aliyuncs.com/polardbx/polardbx-sql:v2.4.0_5.4.19
crictl pull polardbx-opensource-registry.cn-beijing.cr.aliyuncs.com/polardbx/polardbx-cdc:v2.4.0_5.4.19

注意： crictl 拉取镜像的命令没有进度条限制，并且一直阻塞住，在保证网络正常的情况下 静静的等待即可
在这里插入图片描述

下载后可使用crictl image list | grep polardbx-opensource-registry.cn-beijing.cr.aliyuncs.com 命令查看
在这里插入图片描述

如果运行时环境还是docker的话 可以使用docker命令拉取镜像

docker pull polardbx-opensource-registry.cn-beijing.cr.aliyuncs.com/polardbx/polardbx-engine:v2.4.0_8.4.19
docker pull polardbx-opensource-registry.cn-beijing.cr.aliyuncs.com/polardbx/polardbx-sql:v2.4.0_5.4.19
docker pull polardbx-opensource-registry.cn-beijing.cr.aliyuncs.com/polardbx/polardbx-cdc:v2.4.0_5.4.19

同样也可以使用 docker images -a | grep polardbx-opensource-registry.cn-beijing.cr.aliyuncs.com 命令查看

3.3 执行apply
kubectl apply -f polardbx_cluster.yaml
3.4 等待部署完成

通过如下命令查看部署情况

kubectl get polardbxcluster -w

部署 完成后 效果如下
在这里插入图片描述

4. 卸载 polardb-x集群

卸载 polardb-x集群 也比较容易

# polardbx-cluster 这个是集群的名称 名称是在yaml里定义的
kubectl delete polardbxcluster polardbx-cluster

5. 使用polardb-x集群

  • 首先查看连接连接地址 因为我们是两个DN 节点 需要使用一个负载均衡的地址 这个polardb-x 集群部署完成后 已经提供在 k8s的服务里

    在这里插入图片描述
    也可通过命令行 查看该服务
    shell kubectl get service polardbx-cluster

在这里插入图片描述
我们需要使用的就是 这个cluster ip

  • 查看连接DN的账号密码

    可通过可视化工具查看
    在这里插入图片描述
    内容如下
    在这里插入图片描述
    需要注意的是 这个密码不能直接使用 需要先进行base64解密 然后才是真正的密码

    也可以通过命令行查看

     kubectl get secret polardbx-cluster -o jsonpath="{.data['polardbx_root']}" | base64 -d  | xargs echo "Password:"

    输出结果即是密码

  • 使用可视化工具连接测试
    在这里插入图片描述

good day ！！！

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.rhkb.cn/news/403417.html

如若内容造成侵权/违法违规/事实不符，请联系长河编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

二叉树详解（1）

二叉树详解（1）

文章目录 目录1. 树的概念及结构1.1 树的相关概念1.2 树的表示1.3 树在实际中的运用（表示文件系统的目录树结构） 2. 二叉树的概念及结构2.1 概念2.2 特殊的二叉树2.3 二叉树的存储结构 3. 二叉树的顺序结构及实现3.1 二叉树的顺序结构3.2 堆的概念及结构…
阅读更多...
Ubuntu基础使用

Ubuntu基础使用

1.首先我们先获取ubuntu的操作相同其中也分为4部分： 1.云服务器。在服务器里面我们可以去选择3种服务器分别为阿里云，腾讯云，华为云，这3个，有服务器才可以进去进行操作。 2.双系统。双系统有一个特点就是只能同时启动一…
阅读更多...
机器学习：线性回归算法（一元和多元回归代码）

机器学习：线性回归算法（一元和多元回归代码）

1、线性回归 1、数据准备： 描述如何获取和准备数据。 2、图像预处理： 包括图像读取。 3、将数据划分为训练集和测试集。 4、计算数据的相关系数矩阵。 5、模型训练： 详细说明如何使用线性回归算法训练模型&…
阅读更多...
AI视频创作原理

AI视频创作原理

重磅推荐专栏： 《大模型AIGC》 《课程大纲》 《知识星球》 本专栏致力于探索和讨论当今最前沿的技术趋势和应用领域，包括但不限于ChatGPT和Stable Diffusion等。我们将深入研究大型模型的开发和应用，以及与之相关的人工智能生成内容（AIGC）技术。通过深入的技术解析和实践经…
阅读更多...
打卡学习Python爬虫第二天|Web请求过程刨析

打卡学习Python爬虫第二天|Web请求过程刨析

一、服务器渲染 服务器端渲染（Server-Side Rendering，简称SSR）是一种网页渲染技术。在这种技术中，服务器在接收到客户端的请求后，会生成页面的初始HTML内容，并将其发送给客户端。客户端浏览器接收到这些HT…
阅读更多...
Go Roadmap-Basics中文笔记

Go Roadmap-Basics中文笔记

Go Roadmap-Basics 地址：https://roadmap.sh/golang 简介：Github star No.6 学习路线 Go 中译版 Learn the Basics Go特点：静态类型，运行速度快，编译语言，编译速度快，自动垃圾回收&#xff…
阅读更多...
Linux中查看修改系统系统时间

Linux中查看修改系统系统时间

当我们项目部署在Linux中，随着服务器运行时间变长，会出现Linux服务器时间变快或者变慢的情况，有些系统对时间准确性要求比较高，笔者有碰到某天服务器突然无法调用第三方接口，最终排查后系统时间超过15分钟，…
阅读更多...
SAR靶机笔记

SAR靶机笔记

SAR 靶机笔记 概述 SAR 是 Vulnhub 上的靶机，大家可以去 vulnhub 网站上去进行下载。 这里有链接： https://download.vulnhub.com/sar/sar.zip 一丶常规的 nmap 扫描 1）主机发现 sn 只做 ping 扫描，不做端口扫描 nmap -sn …
阅读更多...
Linux - 基础工具使用

Linux - 基础工具使用

文章目录 一、yum1、介绍2、功能3、语法4、使用 二、rzsz1、安装rzsz的指令2、介绍3、使用 三、vim基础使用1、介绍2、基础使用 四、gcc/g使用1、生成可执行文件过程2、语法3、常用选项4、编译过程5、动静态库6、包含头文件的多文件编译7、链接外部库 一、yum 1、介绍 Linux中…
阅读更多...
类和对象（下）(1)

类和对象（下）(1)

类和对象（下） 再探构造函数 我们之前在实现构造函数的时候，初始化成员变量使用的方式都是在函数体内进行赋值，其实构造函数初始化成员变量还有一种方式：初始化列表。 初始化列表不只是为了写得方便，还能解…
阅读更多...
构建具有音频功能的中英翻译器：一个Python应用程序的旅程

构建具有音频功能的中英翻译器：一个Python应用程序的旅程

在当今的全球化世界中，语言翻译工具变得越来越重要。作为一名软件开发者，我最近完成了一个有趣的项目：一个结合了翻译、文字转语音和数据管理功能的中英翻译器。在这篇博客中，我将分享这个应用程序的主要特性和开发过程中的一些见…
阅读更多...
【k8s从节点报错】error: You must be logged in to the server (Unauthorized)

【k8s从节点报错】error: You must be logged in to the server (Unauthorized)

k8s主节点可以获取nodes节点信息，但是从节点无法获取，且报错“error: You must be logged in to the server (Unauthorized)” 排查思路： 当时证书过期了，只处理的主节点的证书过期，没有处理从节点的 kubeadm alpha …
阅读更多...
基于Windows系统和‌Linux系统，以tomcat为案例，讲解如何新增自启动服务。

基于Windows系统和‌Linux系统，以tomcat为案例，讲解如何新增自启动服务。

文章目录 引言‌I Linux系统‌（以CentOS为例）基础知识：运行级别(run level)基于chkconfig 工具，设置服务启动类型。基于systemctl 新增系统服务制定定时任务优化停止Tomcat服务命令II 基于Windows系统设置服务自启动的常规操作安装多个tomcat服务，并设置自启动。引言 场景…
阅读更多...
Vue UI - 可视化的Vue项目管理器

Vue UI - 可视化的Vue项目管理器

概述 Vue CLI 3.0 更新后，提供了一套全新的可视化Vue项目管理器 —— Vue UI。所以要想使用它，你的 Vue CL I版本必须要在v3.0以上。 一、启动Vue UI 1.1 环境准备 1.1.1 安装node.js 访问官网（外网下载速度较慢）或 http://nod…
阅读更多...
【HeadFirst 设计模式】装饰者模式的C++实现

【HeadFirst 设计模式】装饰者模式的C++实现

一、案例背景 Starbuzz是以扩张速度最快而闻名的咖啡连锁店。如果你在街角看到它的店，在对面街上肯定还会看到另一家。因为扩张速度实在太快了，他们准备更新订单系统，以合乎他们的饮料供应要求。他们原先的类设计是这样的…… 购买咖啡时&am…
阅读更多...
西安旅游系统--论文pf

西安旅游系统--论文pf

TOC springboot383西安旅游系统--论文pf 第1章 绪论 1.1 课题背景 二十一世纪互联网的出现，改变了几千年以来人们的生活，不仅仅是生活物资的丰富，还有精神层次的丰富。在互联网诞生之前，地域位置往往是人们思想上不可跨域的鸿…
阅读更多...
Linux快捷方式创建、输出重定向(正确输出和错误输出)

Linux快捷方式创建、输出重定向(正确输出和错误输出)

一.正确输出 创建一个1.txt文件，然后用vim打开这个文件，然后再开一个窗口 进程号是5602 通过proc可以看到5602这个进程 进入5602里面这里记录了程序的信息，找到fd 进入fd目录下面有0124快捷方式：快捷方式对应的真正的文件是 /de…
阅读更多...
HarmonyOS笔记4：从云数据库获取数据

HarmonyOS笔记4：从云数据库获取数据

移动应用获取数据的方式主要有： 1.从网络中获取数据接口API。 2.从华为云数据库获取云数据库的资源。 3.从移动终端直接获取本地的数据 在HarmonyOS笔记3中已经完成了方式一从网络中获取数据接口API的方式。在本篇笔记中，将讨论从云数据库中获取数据。 因…
阅读更多...
Docker下安装Redis

Docker下安装Redis

下载最新Redis镜像 docker pull redis启动Redis容器 docker run -itd --name myFirstRedis -p 6379:6379 redis:latest观察Redis启动效果 docker ps查看Redis的版本 docker exec -it myFirstRedis /bin/bash redis-server --versionRedis服务器和客户端 Redis是基于键值对存…
阅读更多...
了解Android

了解Android

Android 系统架构 从图中可以看出，整个Android操作系统分为五层。它们分别是： 内核层 Android系统是基于Linux内核的，这一层为Android设备的各种硬件提供了底层的驱动。硬件抽象层 该层为硬件厂商定义了一套标准的接口。这样可以在不影响上层…
阅读更多...
最新文章
推荐文章

Copyright @ 2022~2023

友情链接： 我的编程经验分享 一条长河网 尧图网站开发