Redis 集群配置

在币圈交易所,Redis 集群的节点数量和内存大小通常根据交易所的规模、访问量、并发需求等因素来决定。一般来说,可以按照以下标准配置:

Redis 集群节点数量

  • 小型交易所(日活 < 10万,QPS < 10k):通常 3-6 个节点,主从架构(每个主节点对应一个从节点),提供基本的高可用性和故障恢复能力。
  • 中型交易所(日活 10万 - 100万,QPS 10k - 100k):通常 6-12 个节点,采用 3-6 个主节点 + 对应的从节点,分片存储,保障高并发性能。
  • 大型交易所(日活 > 100万,QPS > 100k):通常 12-30 个节点,采用 5-15 个主节点 + 对应的从节点,甚至可能使用多集群架构(多个 Redis Cluster 组)。

Redis 部署架构

  • 集群模式(Redis Cluster):使用哈希槽(16384 个)分片存储,主从架构提高可用性,推荐用于大规模交易所。
  • 哨兵模式(Sentinel):适用于小规模交易所,提供主从切换和高可用性。
  • 持久化策略:大部分交易所只使用 AOF (Append-Only File) + RDB 定期快照,避免因宕机丢失关键数据。

如果是超大型交易所(如 Binance、OKX),可能会有 几十个 Redis 集群,每个集群有 10+ 节点,每个节点 128GB-256GB,通过 分片 + 读写分离 进行扩展。

Gate.io 这种中大型加密货币交易所,Redis 集群的规模通常比较大,主要是为了支撑高并发的撮合交易、行情推送、用户资产查询等核心业务。

Gate.io 级别交易所的 Redis 集群规模

以 Gate.io 这种交易量较大的交易所为例,Redis 集群一般有 几十到上百个节点,部署方式主要依赖 Redis Cluster多个独立的 Redis 组(按业务拆分)

  • 整体规模
    • 主从架构,通常 30~100 个节点
    • 不同业务可能有独立的 Redis 集群,例如:撮合、行情、用户资产等分别使用独立的 Redis 集群。
    • 单个集群的 Redis 主节点通常不超过 16 个,因为 Redis Cluster 采用 16384 个槽位分片,分片太多会导致管理复杂度上升。

单个 Redis 节点的内存配置

  • 单节点的内存大小通常在 128GB - 256GB 之间,少数高需求的场景可能用到 512GB(比如撮合引擎的缓存层)。
  • 为什么不使用更大的内存?
    • Redis 单线程处理,太大内存会影响 RDB、AOF 性能,数据快照和持久化会有卡顿风险。
    • 推荐 128GB - 256GB 作为单节点的合理上限,然后通过 多分片 来扩展 Redis 集群。

Redis 在 Gate.io 交易所的主要应用场景

(1)撮合引擎缓存

  • 交易所的核心是撮合引擎,每秒处理大量订单数据,Redis 主要用于缓存未成交订单。
  • 可能采用 多级缓存
    • 一级缓存(本地内存,如 LRU Cache):撮合引擎直接操作。
    • 二级缓存(Redis):存储未成交订单、盘口数据,提供快速读取能力。
    • 三级缓存(数据库,如 MySQL、TiDB):持久化存储已成交订单。
  • 撮合 Redis 可能是 一个独立的集群,使用高性能配置,比如:
    • 16~32 个 Redis 节点(8~16 个主节点 + 对应从节点)。
    • 256GB 内存 / 节点,数据量较大但不能影响撮合性能

(2)行情数据缓存(K 线、深度数据)

  • Redis 用于存储交易对的实时行情数据,例如 最近成交、盘口深度、K 线数据,然后推送给用户。
  • WebSocket 订阅的数据源一般来源于 Redis,避免直接查询数据库。
  • 可能使用 10~20 个 Redis 节点,以 128GB 内存为主,读写压力较大时可增加从节点进行读分流。

(3)用户资产快照

  • 查询用户资产余额、冻结金额等,用于下单前校验。
  • 由于用户资产变更频繁,可能采用 异步更新机制,Redis 作为缓存层,MySQL 作为最终存储。
  • 可能使用 6~12 个 Redis 节点,128GB 内存/节点

(4)风控、限流

  • 监控用户的交易行为,防止恶意刷单、大额交易风险等。
  • 主要采用 限流(Rate Limiting)、反作弊 逻辑,例如:
    • 统计短时间内某用户的下单次数。
    • 监控 IP、设备指纹等异常行为。
  • 这里可能使用 5~10 个 Redis 节点,因数据量较小,单节点 64GB 内存 即可。

(5)订单状态缓存

  • 订单状态变更前后,Redis 可能作为事务处理中间态缓存,避免数据库过载。
  • 订单状态有时会通过 Redis Stream 或 Kafka 进行消息推送。
  • 可能使用 8~16 个 Redis 节点,单节点 128GB 内存

Redis 的持久化与高可用

  • 持久化方式
    • 交易所通常不直接依赖 Redis 持久化,而是采用 数据库持久化 + Redis 高速缓存 方式。
    • 但为了防止 Redis 数据丢失,仍可能采用 AOF(Append-Only File)+ RDB(定期快照),具体策略:
      • 撮合相关 Redis 可能不开启 AOF(影响性能),而是定期从数据库加载数据。
      • 行情数据可能采用 AOF + RDB 结合方式,确保在 Redis 宕机后可恢复。
  • 高可用方案
    • Redis Cluster + 主从(Replication)+ Sentinel 监控
    • 多个数据中心部署,防止单机房故障影响 Redis。
    • 冷热数据分离,热点数据优先存 Redis,历史数据存数据库或更低成本存储。

总体来看,Gate.io 这种交易所的 Redis 总体集群规模可能在 50~100 个节点,内存总容量 10TB 以上,通过 分片+高可用架构 保障交易高并发和稳定性。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/41378.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

6.4 模拟专题:LeetCode1419.数青蛙

1.题目链接&#xff1a;数青蛙 - LeetCode 2.题目描述 给定一个字符串 croakOfFrogs&#xff0c;表示青蛙的鸣叫声序列。每个青蛙必须按顺序发出完整的 “croak” 字符&#xff0c;且多只青蛙可以同时鸣叫。要求计算最少需要多少只青蛙才能完成该字符串&#xff0c;若无法完成…

Linux 搭建dns主域解析,和反向解析

#!/bin/bash # DNS主域名服务 # user li 20250325# 检查当前用户是否为root用户 # 因为配置DNS服务通常需要较高的权限&#xff0c;只有root用户才能进行一些关键操作 if [ "$USER" ! "root" ]; then# 如果不是root用户&#xff0c;输出错误信息echo "…

Leetcode 二进制求和

java solution class Solution {public String addBinary(String a, String b) {StringBuilder result new StringBuilder();//首先设置2个指针, 从右往左处理int i a.length() - 1;int j b.length() - 1;int carry 0; //设置进位标志位//从2个字符串的末尾向前遍历while(…

【NLP 49、提示工程 prompt engineering】

目录 一、基本介绍 语言模型生成文本的基本特点 提示工程 prompt engineering 提示工程的优势 使用注意事项 ① 安全问题 ② 可信度问题 ③ 时效性与专业性 二、应用场景 能 ≠ 适合 应用场景 —— 百科知识 应用场景 —— 写文案 应用场景 —— 解释 / 编写…

【NLP 43、文本生成任务】

目录 一、生成式任务 二、seq2seq任务 1.模型结构 2.工作原理 3.局限性 三、自回归语言模型训练 Decoder only 四、自回归模型结构&#xff1a;文本生成任务 —— Embedding LSTM 代码示例 &#x1f680; 数据文件 代码流程 Ⅰ、模型初始化 Ⅱ、前向计算 代码运行流程 Ⅲ、加载…

vscode 通过Remote-ssh远程连接服务器报错 could not establish connection to ubuntu

vscode 通过Remote-ssh插件远程连接服务器报错 could not establish connection to ubuntu&#xff0c;并且出现下面的错误打印&#xff1a; [21:00:57.307] Log Level: 2 [21:00:57.350] SSH Resolver called for "ssh-remoteubuntu", attempt 1 [21:00:57.359] r…

Linux之编辑器vim命令

vi/vim命令&#xff1a; 终端下编辑文件的首选工具&#xff0c;号称编辑器之神 基本上分为三种模式&#xff0c;分别是 命令模式&#xff08;command mode&#xff09;>输入vi的命令和快捷键&#xff0c;默认打开文件的时候的模式插入模式&#xff08;insert mode&#x…

第一天学爬虫

阅读提示&#xff1a;我今天才开始尝试爬虫&#xff0c;写的不好请见谅。 一、准备工具 requests库&#xff1a;发送HTTP请求并获取网页内容。BeautifulSoup库&#xff1a;解析HTML页面并提取数据。pandas库&#xff1a;保存抓取到的数据到CSV文件中。 二、爬取步骤 发送请求…

MySQL实战(尚硅谷)

要求 代码 # 准备数据 CREATE DATABASE IF NOT EXISTS company;USE company;CREATE TABLE IF NOT EXISTS employees(employee_id INT PRIMARY KEY,first_name VARCHAR(50),last_name VARCHAR(50),department_id INT );DESC employees;CREATE TABLE IF NOT EXISTS departments…

windows下安装sublime

sublime4 alpha 4098 版本 下载 可以根据待破解的版本选择下载 https://www.sublimetext.com/dev crack alpha4098 的licence 在----- BEGIN LICENSE ----- TwitterInc 200 User License EA7E-890007 1D77F72E 390CDD93 4DCBA022 FAF60790 61AA12C0 A37081C5 D0316412 4584D…

激光线检测算法的FPGA实现

激光线检测算法的FPGA实现 1. 常见的激光线检测算法 激光线检测中常用的三种算法 MAX&#xff08;最大值法&#xff09;、THRESH&#xff08;阈值法&#xff09;、COG&#xff08;灰度重心法&#xff09; 分别具有以下特点和工作原理&#xff1a; 1.1 MAX&#xff08;最大值法…

小样本微调大模型

一、环境搭建 conda create -n dseek python=3.10 conda activate dseek pip install bitsandbytes Pip install numpy python -m pip install --upgrade pip setuptools wheel 安装cuda,torch,Unsloth, huggingface,wandb等,见前述章节; 微调服务器配置:单机笔记本显卡4…

深入理解指针(2)(C语言版)

文章目录 前言一、数组名的理解二、使用指针访问数组三、一维数组传参的本质四、冒泡排序五、二级指针六、指针数组七、指针数组模拟二维数组总结 前言 在上一篇文章中&#xff0c;我们初步了解了指针的基本概念和用法。今天&#xff0c;我们将继续深入探索指针在数组、函数传…

高效内存管理:x86-64架构中的分页机制

在 x86-64 架构的世界里&#xff0c;内存分页机制扮演着举足轻重的角色&#xff0c;它就像是一座桥梁&#xff0c;连接着虚拟地址与物理地址。简单来说&#xff0c;内存分页机制就是将线性地址&#xff08;也就是虚拟地址&#xff09;切分成一个个固定大小的页&#xff0c;并把…

统一开放世界与开放词汇检测:YOLO-UniOW无需增量学习的高效通用开放世界目标检测框架

目录 一、摘要 二、引言 三、相关工作 开放词汇对象检测 开放世界目标检测 参数高效学习 四、高效通用的开放世界目标检测 问题定义 高效的自适应决策学习 开放世界通配符学习 五、Coovally AI模型训练与应用平台 六、实验 数据集 评价指标 实施细节 定量结果 …

fileinclude

##解题思路 场景首页没有什么提示&#xff0c;只有个flag在flag.php中&#xff0c;而且需要更改language&#xff0c;还有个index.php的路径&#xff0c;先记住它 习惯性查看源代码&#xff0c;得到了题目真正的内容&#xff0c;关键在于lan变量读取我们传入的Cookie值中的lang…

链表-LeetCode

这里写目录标题 1 排序链表1.1 插入法 O&#xff08;n&#xff09;1.2 归并排序 1 排序链表 1.1 插入法 O&#xff08;n&#xff09; /*** Definition for singly-linked list.* struct ListNode {* int val;* ListNode *next;* ListNode() : val(0), next(nullpt…

计算机网络基础:WiFi 与蓝牙的原理与应用

计算机网络基础:WiFi 与蓝牙的原理与应用 一、前言二、WiFi 原理2.1 概述2.2 工作频段2.2.1 2.4GHz 频段2.2.2 5GHz 频段2.3 调制技术2.3.1 正交频分复用(OFDM)2.3.2 直接序列扩频(DSSS)2.4 通信协议2.5 网络架构2.5.1 独立基本服务集(IBSS)2.5.2 基础服务集(BSS)2.5.…

深入解析 Java 类加载机制及双亲委派模型

&#x1f50d; Java的类加载机制是确保应用程序正确运行的基础&#xff0c;特别是双亲委派模型&#xff0c;它通过父类加载器逐层加载类&#xff0c;避免冲突和重复加载。但在某些特殊场景下&#xff0c;破坏双亲委派模型会带来意想不到的效果。本文将深入解析Java类加载机制、…

【数据可视化艺术·进阶篇】热力图探秘:用色彩演绎场馆和景区的人流奥秘

假期出游&#xff0c;你是不是也遇到过这样的状况&#xff1a;想去的热门景点&#xff0c;放眼望去全是攒动的人头&#xff0c;根本没法好好欣赏风景&#xff1b;而景区里一些小众角落&#xff0c;却冷冷清清&#xff0c;鲜有人至。还有在轨道交通枢纽、大型体育场这些地方&…