002、架构_概览

GoldenDB 主要由管理节点、计算节点、数据节点、全局事务节点等模块组成,各个节点无需共享任何资源,均为独立自治的通用计算机节点,之间通过高速互联的 网络通讯,从而完成对应用数据请求的快速处理和响应。

在这里插入图片描述

  • 管理节点在数据库中主要负责数据库中各个组件的管理、给客户提供智能化运维管理平 台,不涉及业务的访问流程,一般采用主备方式部署。
  • 计算节点是数据库的计算模块,从驱动层接收用户的 SQL 操作,进行逻辑优化和物理优 化,生成满足分布式事务一致性的分布式查询计划。计算机节点在执行分布式查询计划 时,通过持续地访问数据节点,从而完成用户的最终操作请求。用户可以根据应用对可靠 性、可用性、性能等因素的不同要求,对计算节点进行合理的规划和划分。
  • 数据节点是应用数据的最终存储模块。所有的数据节点组成一个或多个数据库集群,数据 库集群由一个或多个安全组组成,集群中每个表中的数据按照某种策略进行横向分片后存 放到对应的安全组中,分片策略包括复制策略、哈希策略、范围策略、列表策略、多级分 片。
  • 全局事务管理节点在分布式数据库中维护全局事务的全生命周期,提供申请、释放、查询 全局事务的能力,保证了分布式数据的一致性。

管理节点

  • 管理节点:是对系统计算节点集群、数据节点集群管理的节点,它承载了分布式数据库系统的 所有的运维操作,包括集群高可用高可靠的管理、系统的备份恢复、系统元数据管理等操作。
    在这里插入图片描述

管理节点内部由多个模块构成,主要包括以下模块:

  1. 统一运维管理 Insight 模块:Insight 是 GoldenDB 分布式数据库产品的统一操作维护入 口,用户可以在 Insight 上进行用户和权限管理、元数据管理、计算节点管理、数据节点管理、 DDL 执行、节点扩容、备份恢复、系统安装、统计及告警管理等。
  2. 元数据管理器 MetaDataServer 模块:元数据指数据的元信息,如库、表、视图、触发器、 存储过程、函数等数据模型的定义,元数据管理器存放系统的全量元数据,是整个分布式数据库集 群的元数据中心。为了提高启动和运行效率,除了元数据管理器存有元数据定义外,计算节点和数 据节点也会存放元数据定义,但计算机节点和数据节点只存放本节点所涉应用的元数据定义,即当 计算节点中的元数据和管理节点的元数据不一致时,会同步管理节点的元数据到本地。此外,元数 据管理器还保存了整个集群的拓扑信息,因此是更广义的元数据管理。
  3. 计算节点管理 ProxyManager 模块:负责管理计算节点集群。管理工作一般分为两类。一 类为组件管理,包括计算节点的创建、启用、禁用和删除,另一类为应用管理,包括定义计算节点 和应用的对应关系、计算节点异常后的数据恢复调度。
  4. 数据节点管理 ClusterManager 模块:数据节点集群管理也分为两类。一类为组件管理,包 括数据节点、安全组、数据节点集群的创建、变更和删除;另一类为任务管理,包括数据节点异 常、恢复后的调度管理、数据节点备份恢复的调度、数据重分布等功能的任务调度管理

计算节点
在这里插入图片描述

计算节点(CN: Computer Node):负责用于接收应用发送过来的业务语句,对业务语句做语法 解析,对数据做分布式的优化,包括语句的改写,并行分发等等,最终生成分布式的执行计划,按 照执行计划将语句下发到数据节点集群中,计算节点还进行分布式事务的并发控制。

计算节点内部由多个模块构成,主要包括以下模块:

  1. 前端通讯和 SQL 协议处理层模块:负责前端的长链接管理,端口管理,SQL 协议处理
  2. SQL 解析模块:负责对 SQL 语句进行语法检查,SQL 解析生成语法树
  3. SQL 优化模块:负责 SQL 查询优化
  4. SQL 执行模块:负责 SQL 的执行操作
  5. SQL 路由模块:负责数据模块选择,负载均衡及路由管理
  6. 后端通讯和 SQL 协议处理层模块:负责 SQL 协议封装、后端长链接管理,负载均衡
  7. 元数据缓存模块:负责存储元数据信息并持久化
  8. 配置模块:负责存储配置信息和处理

数据节点
数据节点(DN: DataNode):用于存储业务数据,及执行分布式子事务的节点。通常一个集群包 含多个数据节点,每个数据节点都是独立自治的数据库系统,一个业务的数据只会落到一个数据集 群中。业务的数据会被水平的切分后分布在若干个数据节点上,为了保证数据的可用性,每个数据分片均部署多个数据备份节点,假如一个业务的数据分成了 2 份,如果 1 号分片坏了,1 号分片的 备份系统就会替代原分片。因此,数据分片节点和它的备份数据节点构成一个安全组。

在这里插入图片描述

数据节点内部由多个模块构成,主要包括以下模块:

  1. 连接器模块:负责身份认证和权限鉴定,用户登录 GoldenDB 数据库时,进行身份、密 码、权限检测。
  2. 分析器模块:SQL 语句会在分析其中进行词法和语法解析,提取 SQL 关键字,检测确认 SQL 语法是否正确,正确的语法分析语句的功能作用创建正确的数据结构。
  3. 优化器模块:优化器分析 SQL 的最优执行方案,评估 SQL 的执行代价,将代价最小执行最 优的方案做为执行方案去执行,例如如何选择索引,多表如何关联等
  4. 执行器模块:执行优化器确认的最优方案,将数据从数据文件中返回给客户端。
  5. 数据文件模块:数据文件是存储表空间数据的位置,数据文件依据表的组织结构存储保存 表数据。

全局事务节点
在这里插入图片描述

全局事务节点(GTM: Global Transaction Manager):负责协调 CN 一起进行分布式事务的并发 控制,维护当前所有正在执行的分布式事务列表,维护全局事务的全生命周期,提供全局事务的申 请、释放、查询能力,也提供全局序列的创建、修改、申请。

全局事务节点内部由多个模块构成,主要包括以下模块:

  1. 公共消息处理模块:负责维护和计算节点间的心跳、向管理节点上报状态信息、处理元数 据等功能
  2. 全局事务消息处理模块:负责处理来自计算节点或管理节点的全局事务、序列等业务请 求,并在相应的模块处理完成后向请求节点发送响应,此外还负责对变化的全局事务信息进行主备 机同步以及维护水位信息
  3. GTID 处理模块:负责 GTID 的申请、查询、释放请求在 GTM 内部的逻辑处理
  4. SEQUENCE 处理模块:负责 SEQUENCE 的创建、修改、申请请求在 GTM 内部的逻辑处理
  5. CTID 处理模块:负责事务标识的申请、查询、释放请求在 GTM 内部的逻辑处理
  6. 告警模块:负责处理 GTM 运行过程中产生的告警信息的持久化和上报
  7. 监控模块:负责监控其他模块的运行状态并周期性打印统计信息
  8. 持久化模块组:持久化模块组中包含多个子模块,如 GTID 持久化模块、SEQUENCE 持久 化模块、SEQUENCE 上传模块等,主要负责 GTID、SEQUENCE 等信息的持久化和备份恢复功能

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/408205.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

【JVM】剖析字符串与数组的底层实现(一)

剖析字符串与数组的底层实现 字符数组的存储方式 JVM有三种模型: 1.Oop模型:Java对象对应的C对象2.Klass模型:Java类在JVM对应的C对象3.handle模型 字符串常量池 即String Pool,但是JVM中对应的类是StringTable,底层实现是一个hashtable,如代码所示 …

三级_网络技术_42_综合题(命令)

一、 如图所示,某园区网用10Gbps的POS技术与intemet相连,POS接囗的帧格式是SDH。在R3上配置一个oopback接口,"P地址为10.2.15.1,路由协议的选择方案是,园区网内部采用OSPF动态路由协议,园区网与Inter…

如何使用ssm实现基于面向对象的学生事务处理系统分析与设计

TOC ssm138基于面向对象的学生事务处理系统分析与设计jsp 绪论 1.1 研究背景 当前社会各行业领域竞争压力非常大,随着当前时代的信息化,科学化发展,让社会各行业领域都争相使用新的信息技术,对行业内的各种相关数据进行科学化…

go中 panicrecoverdefer机制

go的defer机制-CSDN博客 常见panic场景 数组或切片越界,例如 s : make([]int, 3); fmt.Println(s[5]) 会引发 panic: runtime error: index out of range空指针调用,例如 var p *Person; fmt.Println(p.Name) 会引发 panic: runtime error: invalid m…

AJAX(4)——XMLHttpRequest

XMLHttpRequest 定义:XMLHttpRequest(XHR)对象用于与服务器交互。通过XMLHttpRequest可以在不刷新页面的情况下请求特定URL,获取数据。这允许网页在不影响用于操作的情况下,更新页面的局部内容。XMLHttpRequest在AJAX编程中被大量使用 关系…

MATLAB 手动实现点云投影滤波器 (76)

点云投影到邻近的精确拟合平面,减少噪声点,此为投影滤波器 MATLAB 手动实现点云投影滤波器(76) 一、投影滤波器简介二、实现步骤二、算法实现1.代码2.效果这里用到的投影方法和平面拟合方法以及生成平面方法都在以往文章有所实现,有兴趣可参考: MATLAB点云处理总目录 一…

C++动态规划及九种背包问题

目录 目录 一,动态规划 一),动态规划的定义 二),动态规划其他的相关概念(也是使用条件) 1,重叠子问题 2, 最优子结构 3,无后效性 三)&…

dompdf导出pdf中文乱码显示问号?、换行问题、设置图片大小

环境:PHP 8.0 框架:ThinkPHP 8 软件包:phpoffice/phpword 、dompdf/dompdf 看了很多教程(包括GitHub的issue、stackoverflow)都没有解决、最终找到解决问题的根本! 背景:用Word模板做转PDF…

【JavaEE初阶】IP协议

目录 📕引言 🌴IP协议的概念 🌳IP数据报 🚩IPv4协议头格式 🚩IPv6的诞生 🏀拓展 🎄IP地址 🚩IP地址的格式: 🚩IP地址的分类 🏀网段划分…

【第57课】SSRF服务端请求Gopher伪协议无回显利用黑白盒挖掘业务功能点

免责声明 本文发布的工具和脚本,仅用作测试和学习研究,禁止用于商业用途,不能保证其合法性,准确性,完整性和有效性,请根据情况自行判断。 如果任何单位或个人认为该项目的脚本可能涉嫌侵犯其权利&#xff0…

Unity动画模块 之 Animator中一些常见参数

本文仅作笔记学习和分享,不用做任何商业用途 本文包括但不限于unity官方手册,unity唐老狮等教程知识,如有不足还请斧正 我发现我忘了写Animator了,正好有些不常用的参数还没怎么认识,笔记来源于唐老狮 1.状态窗口参数 2.连线参数…

如何使用ssm实现学生公寓管理系统的设计与实现

TOC ssm106学生公寓管理系统的设计与实现jsp 绪论 1.1 研究背景 当前社会各行业领域竞争压力非常大,随着当前时代的信息化,科学化发展,让社会各行业领域都争相使用新的信息技术,对行业内的各种相关数据进行科学化,…

Qt第十八章 XML和Json格式解析

文章目录 JSON格式解析Json生成案例 XML简介与HTML的区别格式XML解析流的方式DOM XML生成 JSON与XML的区别比较 JSON 格式 JSON是一个标记符的序列。这套标记符包含六个构造字符、字符串、数字和三个字面名 六个构造字符 开始和结束数组:[ ]开始和结束对象&#x…

简易STL实现 | Vector的实现

1、内存管理 1、std::vector 维护了两个重要的状态信息:容量(capacity:当前 vector 分配的内存空间大小)和大小(size: vector 当前包含的元素数量) 2、当容量不足以容纳新元素时,s…

SSH 远程登录报错:kex_exchange_identification: Connection closed.....

一 问题起因 在公司,使用ssh登录远程服务器。有一天,mac终端提示:`kex_exchange_identification: Connection closed by remote host Connection closed by UNKNOWN port 65535`。 不知道为啥会出现这样的情形,最近这段时间登录都是正常的,不知道哪里抽风了,就提示这个。…

巴恩斯利蕨数学公式及源码实现——JavaScript版

为什么要写这篇文章 本篇接《张侦毅:巴恩斯利蕨数学公式及源码实现》。之前文章中源码的编程语言用的是Java,JDK的版本为8,现在我的JDK版本已经升级到22了,在新版本JDK中,原来的JApplet方法已经被废弃,不能…

鸿蒙实现在图片上进行标注

一.实现思路 现在需求是:后端会返回在这张图片上的相对位置,然后前端这边需要在图片上进行标注,就是画个框框圈起来,返回的数据里包括当前框的x,y坐标和图片大小,大体思路就是使用canvas绘制,使用鸿蒙的st…

vue-element-admin解决三级目录的KeepAlive缓存问题(详情版)

vue-element-admin解决三级目录的KeepAlive缓存问题(详情版) 本文章将从问题出现的角度看看KeepAlive的缓存问题,然后提出两种解决方法。本文章比较详细,如果只是看怎么解决,代码怎么改,请前往配置版。 一…

零工市场小程序应该有什么功能?

数字经济现如今正飞速发展,零工市场小程序在连接雇主与自由职业者方面发挥着越来越重要的作用。一个高效的零工市场小程序不仅需要具备基础的信息发布与匹配功能,还应该涵盖交易管理、安全保障以及个性化服务等多个方面。 那么,零工市场小程…

Ubuntu22.04下安装LDAP

目录 1 简单说明2 安装配置2.1 安装1、安装前准备2、安装 OpenLADP3、配置OpenLDAP4、设置基本组5、添加新组5、添加 OpenLDAP 用户 2.2 安装 LDAP 帐户管理器1、安装2、配置 LDAP 帐户管理器 3 简单使用3.1 创建一个组3.2 创建一个用户 总结 1 简单说明 之前写过在Centos下的…