基于OMS构建OceanBase容灾双活架构的实践

在实际生产环境中,对于关键业务,往往会有容灾双活的需求。除了OceanBase提供的主备库能力,通过官方工具OMS也可以实现容灾双活架构。目前,通过OMS实现的双活架构仅支持OceanBase数据库之间的数据同步。

要通过OMS实现双活架构,用户需要在各地域都部署OMS系统。若仅在单地域进行部署,则无法通过OMS实施双活架构。需要注意的是,在创建数据源时,两端的OceanBase集群也需要位于不同的地域,以满足异地双活架构的配置要求。

具体的安装配置过程,这里做了一个测试案例,并记录整个双活搭建的过程,以供大家参考。

环境准备

安装准备

OMS的多地域部署详细步骤也可以参考官网文档:OMS多地域部署

首先,需要在官网下载OMS安装包:官网下载地址,选择OceanBase迁移服务的安装包;

通过docker load -i <下载下来的安装包>的方式,将OMS镜像加载到本地(需要安装docker,版本不低于V1.13);

如果需要部署influxdb,可以使用docker或者本地部署的方式,这里采用和官网一样,docker部署,目前支持的时序数据库为 InfluxDB 1.8 版本;

环境资源规划
IP地址角色地域
172.24.255.16OMS的元数据库其他
172.24.255.24OMS节点1 & influxdb北京
172.24.255.25OMS节点2杭州
172.24.255.17源端OBServer节点北京
172.24.255.18目标端OBServer节点杭州

安装部署

安装influxdb(可选)

安装inflxudb之后,可以监控数据同步链路情况。

influxdb安装配置如下

# 运行influxdb docker环境
[root@oms oms]# sudo docker run  -dit -p 8086:8086 -p 14444:14444 \
> -v /omsdata:/var/lib/influxdb \
> --env INFLUXDB_BIND_ADDRESS=127.0.0.1:14444 \
> --env INFLUXDB_HTTP_AUTH_ENABLED=true \
> --env INFLUXDB_HTTP_PING_AUTH_ENABLED=true \
> --name=oms-influxdb \
> influxdb:1.8
95dedec9ea51147898d56b74dfaf021fba3543e8e1d903364f4a907af812c424# 查看influxdb docker
[root@oms oms]# docker ps
CONTAINER ID        IMAGE               COMMAND                  CREATED             STATUS              PORTS                                              NAMES
95dedec9ea51        influxdb:1.8        "/entrypoint.sh in..."   5 seconds ago       Up 5 seconds        0.0.0.0:8086->8086/tcp, 0.0.0.0:14444->14444/tcp   oms-influxdb# 进入容器中进行配置
[root@oms oms]# docker exec -it 95dedec9ea51 /bin/bash
root@95dedec9ea51:/# cd /usr/bin# 创建用户,提供OMS连接
root@95dedec9ea51:/usr/bin# ./influx
Connected to http://localhost:8086 version 1.8.3
InfluxDB shell version: 1.8.3
> create user admin with password 'xxxxxx' with all privileges;
> exit
root@95dedec9ea51:/usr/bin# exit
exit
[root@oms oms]#

创建OMS配置文件

这里使用有配置文件的方式进行部署,配置文件内容如下:

# OMS 元数据库信息
oms_meta_host: 172.24.255.16
oms_meta_port: 2881
oms_meta_user: root@租户名  # 已为OMS创建好对应的租户,并设置了登陆密码
oms_meta_password: xxxxxx# 用户可以自定义以下三个数据库的名称,OMS 部署时会在元信息库中创建出这三个数据库
drc_rm_db: drc_rm_db
drc_cm_db: drc_cm_db
drc_cm_heartbeat_db: drc_cm_heartbeat_db# OMS 集群配置
# 单节点部署时,通常配置为当前 OMS 机器 IP(建议使用内网 IP)
cm_url: http://172.24.255.24:8088
cm_location: 100
# 单节点部署时,无需设置 cm_region
cm_region: cn-beijing
# 单节点部署时,无需设置 cm_region_cn
cm_region_cn: 北京
cm_is_default: true
cm_nodes:- 172.24.255.24# 时序数据库配置
# 默认值为 false。如果您需要开启指标汇报功能,请设置为 true
tsdb_enabled: true
# 当 tsdb_enabled 为 true 时,请取消下述参数的注释并根据实际情况填写
tsdb_service: 'INFLUXDB'
tsdb_url: '172.24.255.24:8086'
tsdb_username: admin
tsdb_password: xxxxxx

注意,如果这里每个地域要部署多个OMS服务的话,cm_url 需要配置为当前地域所有 CM 隶属的一个 VIP 或域名下。这里因为北京和杭州两个地域,每个地域只部署一个节点,所以直接在每个地域选择使用本地节点IP。

安装OMS多地域
# 查看oms镜像
[root@oms oms]# docker images
REPOSITORY                                 TAG                 IMAGE ID            CREATED             SIZE
reg.docker.alibaba-inc.com/oceanbase/oms   feature_4.1.1_ce    258282c19081        5 weeks ago         3.82 GB
influxdb                                   1.8                 c15aefdd926b        2 years ago         307 MB# 获取部署脚本
[root@oms oms]# sudo docker run -d --name oms-config-tool 258282c19081 bash && sudo docker cp oms-config-tool:/root/docker_remote_deploy.sh . && sudo docker rm -f oms-config-tool# 执行安装部署,安装提示,一步一步进行选择
[root@oms oms]# sh docker_remote_deploy.sh -o /omsdata -c /opt/oms/oms_config.yaml -i 172.24.255.24 -d 258282c19081提示:输入 <Control-C> 可退出部署请选择部署模式:单地域单节点单地域多节点
●多地域
您选择的部署模式是:多地域部署模式
请选择您所需要进行的任务:无配置文件,全新部署 OMS,从生成配置文件开始
●已通过脚本[-c]选项传入参考配置文件,基于参考配置文件开始配置
已加载您的所有配置项,并校验通过。
您的配置如下:
{"apsara_audit_enable": "false","apsara_audit_sls_access_key": "","apsara_audit_sls_access_secret": "","apsara_audit_sls_endpoint": "","apsara_audit_sls_ops_site_topic": "","apsara_audit_sls_user_site_topic": "","cm_is_default": true,"cm_location": "100","cm_nodes": ["172.24.255.24"],"cm_region": "cn-beijing","cm_region_cn": "北京","cm_url": "http://172.24.255.24:8088","drc_cm_db": "drc_cm_db","drc_cm_heartbeat_db": "drc_cm_heartbeat_db","drc_rm_db": "drc_rm_db","oms_meta_host": "172.24.255.16","oms_meta_password": "xxxxxx","oms_meta_port": "2881","oms_meta_user": "root@租户名","tsdb_enabled": true,"tsdb_password": "xxxxxx","tsdb_service": "INFLUXDB","tsdb_url": "172.24.255.24:8086","tsdb_username": "admin"
}[y/n] 您是否需要重新配置?[n]n
您是需要在当前执行的机器上
接下来 OMS 需要在节点 ['172.24.255.24'] 上依次执行部署脚本。
请输入节点 172.24.255.24 上预备部署 OMS 的挂载目录:[/omsdata/]/omsdata/
请您确认以下内容:
[y/n] 部署 OMS 的 [镜像名/IMAGE-ID] 是:258282c19081 ,请确认是否正确。[y]y
[y/n] 是否需要在 OMS 容器中挂载 HTTPS 证书?[n]n
[y/n] 172.24.255.24 节点下的配置文件 config.yaml 将写在这个路径:/omsdata/ 下可以吗?[y]y1d7e4d1df16c456474a71636ae73e01acb3f7b156376b43a7b32821de00ba751
[CHECK] Check the validity of config.yaml format.
[PASSED]
[CHECK] Check the version of Docker on the host machine.
Docker version is: 1.13.1.
[PASSED]
[CHECK] Check the synchronization between the MetaDB clock and the machine clock.
[PASSED]
Waiting docker_cmd.sh to finished
......

当出现如下:“【结束】全部初始化步骤执行成功”,则表示第一个地域已经安装完成

2023-09-08 16:34:10,322-urllib3.connectionpool-DEBUG connectionpool._new_conn.249 :Starting new HTTP connection (1): 172.24.255.24:8088
2023-09-08 16:34:10,343-urllib3.connectionpool-DEBUG connectionpool._make_request.482 :http://172.24.255.24:8088 "POST /consumer/create HTTP/1.1" 200 35
{"consumer":"drc","isSuccess":true}--------------------------------------------------------------------------------
# 【结束】全部初始化步骤执行成功
--------------------------------------------------------------------------------

安装完成之后,因为是多地域,所以安装程序不会直接退出,接着需要配置和安装其他地域的oms

[y/n] 已完成地域:[['cn-beijing']]的部署,需要在新的地域上部署吗?[y]y
您选择的部署模式为多地域部署模式
请输入英文地域标识,如:cn-hangzhou:[cn-beijing]cn-hangzhou
请输入中文地域标识,如:杭州:[北京]杭州
请输入 OMS 集群管理服务的地址(即当前地域所有 CM 机器挂载的同一个 VIP 或域名,原配置项名称为:cm_url):[http://172.24.255.24:8088]http://172.24.255.25:8088
请依次输入本地域中所有机器 IP 地址,用","分隔:[172.24.255.24]172.24.255.25
请为当前地域(杭州)设置一个地域编号,范围为[0,127]:[100]101
您的 OMS 集群配置如下:
{"cm_is_default": false,"cm_location": "101","cm_nodes": ["172.24.255.25"],"cm_region": "cn-hangzhou","cm_region_cn": "杭州","cm_url": "http://172.24.255.25:8088"
}[y/n] 请确认配置信息[y]y
接下来 OMS 需要在节点 ['172.24.255.25'] 上依次执行部署脚本。
请输入节点 172.24.255.25 上预备部署 OMS 的挂载目录:[/omsdata/]/omsdata/
请您确认以下内容:
[y/n] 部署 OMS 的 [镜像名/IMAGE-ID] 是:258282c19081 ,请确认是否正确。[y]y
[y/n] 是否需要在 OMS 容器中挂载 HTTPS 证书?[n]n
[y/n] 检查到待部署节点 172.24.255.25 与当前执行部署工具所在机器 IP 不一致,是否远程执行脚本(需要远程节点 172.24.255.25 能够通过 SSH 连接,用户具有远程节点上 sudo 权限)[y]y
[y/n] 请确认节点 172.24.255.25 的端口 22 是否能够通过 SSH 连通?[y]y
请输入节点:172.24.255.25 的用户名:root
请输入节点:172.24.255.25 的密码:***********
[y/n] 172.24.255.25 节点下的配置文件 config.yaml 将写在这个路径:/omsdata/ 下可以吗?[y]y
1b10361403d14e4584a53ef930737b7579dfd2f6da8c9f524b6a8c418dde302e
oceanbaseV5
[CHECK] Check the validity of config.yaml format.
[PASSED]
[CHECK] Check the version of Docker on the host machine.
Docker version is: 1.13.1.
[PASSED]
[CHECK] Check the synchronization between the MetaDB clock and the machine clock.
[PASSED]
Waiting docker_cmd.sh to finished
......

等待部署成功,部署完成之后,会提示已经安装完成哪些地域。如果不需要再安装新的地域,输入n退出即可。

2023-09-08 16:39:27,700-urllib3.connectionpool-DEBUG connectionpool._new_conn.249 :Starting new HTTP connection (1): 172.24.255.25:8088
2023-09-08 16:39:27,716-urllib3.connectionpool-DEBUG connectionpool._make_request.482 :http://172.24.255.25:8088 "POST /consumer/create HTTP/1.1" 200 116
{"errMsg":"com.alibaba.drc.exception.CMBizException: Consumer [drc] already exists","errCode":302,"isSuccess":false}--------------------------------------------------------------------------------
# 【结束】全部初始化步骤执行成功
--------------------------------------------------------------------------------
[y/n] 已完成地域:[['cn-beijing', 'cn-hangzhou']]的部署,需要在新的地域上部署吗?[y]n
[root@oms oms]#

登陆访问OMS

这个时候无论访问 http://172.24.255.24:8089 还是 http://172.24.255.25:8089 都是可以的,这块也可以使用负载均衡,可以实现当其中一个oms挂了,不影响oms的访问和登陆。

OceanBase集群双活搭建

可参照官网文档 OceanBase 社区版之间的容灾双活,介绍了搭建容灾双活的使用限制和注意事项等。搭建容灾双活,需要依赖于OCP或者ConfigServer,ConfigServer安装部署可参考官网博客文档:【SOP 系列 15】configserver 安装和使用。

容灾双活需要创建两条同步链路,分别为正向同步链路和反向同步链路。

创建数据源

OMS多地域部署之后,在创建数据源时,如下图可以选择数据源为多个地域

1702609289

当OceanBase作为源数据库做增量同步时,需要指定OCP或者ConfigServer组件,这里先关联下已部署的OCP

1702609306

在数据源管理页面,创建双活两端的数据源

1702609320

创建完成之后如下,两个数据源分别在不同的地域

1702609339

创建正向同步链路

在数据迁移页面,开始创建正向同步链路

1702609356

选择好数据源之后,在使用场景这里选择容灾双活

1702609374

第二步,这里选择迁移类型,根据实际情况进行选择

1702609393

因为OceanBase作为源端,并且需要做增量同步,因此这里需要关联下OCP,填写账号密码

1702609411

如果没有OCP,这里也可以用ConfigUrl,如果单独安装了ConfigServer

1702609428

选择要同步的表

1702609464

迁移选项配置

1702609480

预检查

1702609496

出现如下警告,可以进到OceanBase数据库中做下修改

目标端数据库 max_allowed_packet 参数小于预期值 8388608 B,可能会导致数据迁移性能不佳。对目标端 OceanBase 的情况,建议 MySQL 模式 >= 8MB,Oracle 模式 >= 64MB,命令设置:set global max_allowed_packet=8388608。

开始同步

1702609514

此时已完成正向的同步链路创建,要想实现双活,还需要反向进行同步

1702609530

创建反向同步链路

反向同步链路创建方式与正向基本一致,不过需要注意的是在迁移类型部分

1702609546

迁移类型这里,不能再选择结构迁移和全量迁移,因为结构和全量数据已经通过正向链路进行了同步,并且不能同步DDL,正向和反向链路,只能有一个开启同步DDL,因此在这里只选择增量同步。

1702609565

其他的步骤都基本一样

1702609584

保存之后点击下一步

1702609602

配置迁移选项

1702609628

预检查

1702609649

开始同步

1702609667

双活测试

以下是双活的测试过程:

1702609684

分别开启两个窗口,连接两端的OceanBase数据库:

1、在OB1插入两条数据,可以在OB2端看到数据同步过去;

2、在OB2插入两条数据,可以看到在OB1端也同步过来;

3、在OB1端创建一张表,在OB2端该表结构也做了同步;

4、在OB2端对新建表插入数据,在OB1端可以查到插入的数据;

5、在OB1端对表结构进行变更,在OB2端可以看到变更成功。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/416068.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

合宙LuatOS开发板Core_Air780EP使用说明

Core-Air780EP 开发板是合宙通信推出的基于 Air780EP 模组所开发的&#xff0c; 包含电源&#xff0c;SIM卡&#xff0c;USB&#xff0c;天线&#xff0c;音频等必要功能的最小硬件系统。 以方便用户在设计前期对 Air780EP模块进行性能评估&#xff0c;功能调试&#xff0c;软…

快速学习GO语言总结

干货分享&#xff0c;感谢您的阅读&#xff01;备注&#xff1a;本博客将自己初步学习GO的总结进行分享&#xff0c;希望大家通过本博客可以在短时间内快速掌握GO的基本程序编码能力&#xff0c;如有错误请留言指正&#xff0c;谢谢&#xff01; 一、初步了解Go语言 &#xf…

基于约束大于规范的想法,封装缓存组件

架构&#xff1f;何谓架构&#xff1f;好像并没有一个准确的概念。以前我觉得架构就是搭出一套完美的框架&#xff0c;可以让其他开发人员减少不必要的代码开发量&#xff1b;可以完美地实现高内聚低耦合的准则;可以尽可能地实现用最少的硬件资源&#xff0c;实现最高的程序效率…

职业院校如何建设人工智能实训室

随着人工智能&#xff08;AI&#xff09;技术的快速发展&#xff0c;越来越多的职业院校开始意识到培养具备AI技能的人才的重要性。为了让学生能够在实践中学习&#xff0c;职业院校需要建立能够支持实际操作的人工智能实训室。本文将探讨职业院校应该如何规划和建设一个高效且…

大模型产品经理学习路线,2024最新,从零基础入门到精通,非常详细收藏我这一篇

随着人工智能技术的发展&#xff0c;尤其是大模型&#xff08;Large Model&#xff09;的兴起&#xff0c;越来越多的企业开始重视这一领域的投入。作为大模型产品经理&#xff0c;你需要具备一系列跨学科的知识和技能&#xff0c;以便有效地推动产品的开发、优化和市场化。以下…

《Cloud Native Data Center Networking》(云原生数据中心网络设计)读书笔记 -- 09部署OSPF

本章的目的是帮助网络工程师确定网络的理想 OSPF 配置。本章将回答以下问题 应何时在数据中使用OSPF ?配置 OSPF 的关键设计原则是什么?OSPFv2 和 OSPFv3 之间有什么区别&#xff0c;应如何使用?如何在路由协议栈中配置 OSPF ?如何在服务器上配置 OSPF&#xff0c;例如为容…

Electron 项目实战 03: 实现一个截图功能

实现效果 实现思路 创建两个window&#xff0c;一个叫mainWindow&#xff0c;一个叫cutWindowmainWindow&#xff1a;主界面用来展示截图结果cutWindow&#xff1a;截图窗口&#xff0c;加载截图页面和截图交互逻辑mainWindow 页面点击截图&#xff0c;让cutWIndow 来实现具体…

‌智慧公厕:城市文明的智慧新篇章‌@卓振思众

在日新月异的城市化进程中&#xff0c;公共设施的智能化升级已成为不可逆转的趋势。其中&#xff0c;智慧公厕作为城市智慧化建设的重要组成部分&#xff0c;正悄然改变着我们的生活。智慧公厕&#xff0c;这一融合了物联网、大数据、云计算等现代信息技术的创新产物&#xff0…

Django Admin管理后台导入CSV

修改管理模型&#xff0c;代码如下&#xff1a; class CsvImportForm(forms.Form):csv_file forms.FileField() admin.register(Hero) class HeroAdmin(admin.ModelAdmin, ExportCsvMixin):...change_list_template "entities/heroes_changelist.html"def get_url…

Opencv中的直方图(2)计算图像的直方图函数calcHist()的使用

操作系统&#xff1a;ubuntu22.04 OpenCV版本&#xff1a;OpenCV4.9 IDE:Visual Studio Code 编程语言&#xff1a;C11 算法描述 计算一组数组的直方图。 函数 cv::calcHist 计算一个或多个数组的直方图。用于递增直方图bin的元组的元素是从相同位置的相应输入数组中获取的。…

MATLAB中cond函数用法

目录 语法 说明 示例 矩阵的条件数 1-范数条件数 cond函数的功能是返回逆运算的条件数。 语法 C cond(A) C cond(A,p) 说明 C cond(A) 返回 2-范数逆运算的条件数&#xff0c;等于 A 的最大奇异值与最小奇异值之比。 C cond(A,p) 返回 p-范数条件数&#xff0c;其中…

虚幻地形高度图生成及测试

虚幻地形高度图生成及测试 虚幻引擎地形系统将高度数据存储在高度图中&#xff0c;这是一个灰阶图像&#xff0c;使用黑白色值来存储地貌高程。在高度图中&#xff0c;纯黑色值表示最低点&#xff0c;纯白色值表示最高点。支持16位灰阶PNG、8位灰阶r8及16位灰阶r16格式。 本文…

C++设计模式——Template Method模板方法模式

一&#xff0c;模板方法模式的定义 模板方法模式是一种行为型设计模式&#xff0c;它先定义了一个算法的大致框架&#xff0c;然后将算法的具体实现步骤分解到多个子类中。 模板方法模式为算法设计了一个抽象的模板&#xff0c;算法的具体代码细节由子类来实现&#xff0c;从…

springboot高校实验室教学管理系统的设计和实现

基于springbootvue高校实验室教学管理系统的设计和实现(源码L文ppt)4-045 4 系统总体设计 此次高校实验室教学管理系统通过springboot框架。springboot适合快速构建Web应用。springboot将B/S设计模式中的视图分成了View模块和Template模块两部分&#xff0c;将动态的逻辑处理…

传统CV算法——基于opencv的答题卡识别判卷系统

基于OpenCV的答题卡识别系统&#xff0c;其主要功能是自动读取并评分答题卡上的选择题答案。系统通过图像处理和计算机视觉技术&#xff0c;自动化地完成了从读取图像到输出成绩的整个流程。下面是该系统的主要步骤和实现细节的概述&#xff1a; 1. 导入必要的库 系统首先导入…

亚信安全荣获“2024年网络安全优秀创新成果大赛”优胜奖

近日&#xff0c;由中央网信办网络安全协调局指导、中国网络安全产业联盟&#xff08;CCIA&#xff09;主办的“2024年网络安全优秀创新成果大赛”评选结果公布。亚信安全信舱ForCloud荣获“创新产品”优胜奖&#xff0c;亚信安全“宁波市政务信息化网络数据安全一体化指挥系统…

C语言 | Leetcode C语言题解之第392题判断子序列

题目&#xff1a; 题解&#xff1a; bool isSubsequence(char* s, char* t) {int n strlen(s), m strlen(t);int f[m 1][26];memset(f, 0, sizeof(f));for (int i 0; i < 26; i) {f[m][i] m;}for (int i m - 1; i > 0; i--) {for (int j 0; j < 26; j) {if (t…

初级python代码编程学习----简单的图形化聊天工具

创建一个图形化的聊天工具通常需要使用编程语言和图形用户界面库。以下是一个使用Python和Tkinter库创建的基本图形化聊天工具的代码示例&#xff1a; 代码 import tkinter as tk from tkinter import scrolledtext # 创建主窗口 root tk.Tk() root.title("图形化聊天…

Echarts 绘制地图省、市、区、县(以及点击显示下级,支持坐标定位)

** Echarts 绘制地图省、市、区、县&#xff08;以及点击显示下级&#xff0c;支持坐标定位&#xff09; ** 上代码 <template><div class"mapCont"><div id"mapSelf" contextmenu.prevent"disableContextMenu"></div&g…

光盘安全隔离与信息单向导入系统-信刻

信刻从用户需求出发&#xff0c;为更多用户提供安全可靠的跨网数据单向导入/导出光盘摆渡系统解决方案&#xff0c;解决内外网数据交换的问题&#xff0c;确保数据交换过程的安全性。 公司所研发出的光盘安全隔离与信息单向导入系统依托软硬件相结合的技术&#xff0c;集策略摆…