RISC-V公测平台发布 · 使用YCSB测试SG2042上的MySQL性能

实验介绍：

YCSB（全称为Yahoo! Cloud Serving Benchmark），该性能测试工具由Java语言编写（在之前的MC文章中也提到过这个，如果没看过的读者可以去看看之前MC那一期），主要用于云端或者服务器端的数据库性能测试工具，其内部涵盖了常见的NoSQL数据库产品，如Cassandra、MongoDB、HBase、Redis等等。

MySQL数据库服务是一个完全托管的数据库服务，可使用世界上最受欢迎的开源数据库来部署云原生应用程序。它是百分百由MySQL原厂开发，管理和提供支持。

当然，本次实验所用到的平台还是衡山-2（HS-2）RISC-V通用主板，该主板是一款专为开发者设计的标准mATX主板，该主板最高支持128GB内存，通过类似PC的丰富的接口和较强的兼容性，赋予开发者桌面级的RISC-V开发体验。

HS-2主板搭载了一颗国产的服务器级RISC-V 64核处理器（SG2042）。SG2042是目前已量产的性能最高的RISC-V处理器，主要针对高性能计算领域需求设计，适用于科学计算、工程计算、AI计算、融合计算等大算力应用场景。

实验材料：

MySQL/MySQL源代码

一台SG2042服务器（HS-2）

TPCC源代码

YCSB源代码

JDK（本教程使用系统自带的JDK 11）

实验过程：

安装MySQL：

方式一：直接通过apt安装

sudo apt install mysql-server

方式二：编译安装（此路不通）

下载源码

wget

https://cdn.mysql.com//Downloads/MySQL-8.0/mysql-8.0.34.tar.gz

如果wget太慢，可以先提前下载到电脑上，然后再传到服务器上。

解压并进入

tar -xzvf mysql-8.0.34.tar.gzcd mysql-8.0.34/mkdir buildcd build/

由于MySQL需要boost，而且直接下载boost比较慢，因此我们选择手动下载boost

https://boostorg.jfrog.io/artifactory/main/release/1.77.0/source/boost_1_77_0.tar.gz

解压

tar -xzvf boost_1_77_0.tar.gz

回到mysql的build文件夹下：

cd mysql-8.0.34/build/

运行cmake​​​​​​​

sudo cmake .. -DDEFAULT_CHARSET=utf8mb4 -DDEFAULT_COLLATION=utf8mb4_unicode_ci 
-DENABLED_LOCAL_INFILE=ON                                    -DWITH_SSL=system 
-DCMAKE_INSTALL_PREFIX=/usr/local/mysql/server  -DMYSQL_DATADIR=/usr/local/mysql/data 
-DMYSQL_TCP_PORT=3306                                        -DDOWNLOAD_BOOST=0 
-DWITH_BOOST=/home/perfxlab01/boost_1_77_0/

编译并安装

sudo make -j64

结果提示SHM_Buffer.hpp上的代码报错，后来发现当时不支持RISC-V平台编译，因此在此建议还是通过包管理器安装mysql。

注意，如果是之前已经卸载并重装过mysql，如果出现sock无法访问，请参考：

https://stackoverflow.com/questions/70813122/getting-error-mysql-service-failed-because-the-control-process-exited-with-erro

如果提示mysql.cnf出错，只要执行以下命令即可修复。​​​​​​​

sudo touch /etc/mysql/mysql.cnf（新建mysql.cnf文件）sudo dpkg --configure -a（重新配置）

初始化设置：

sudo mysql_secure_installation

图片

 

发现没有权限

进入mysql

sudo mysql

执行以下命令：

ALTER USER 'root'@'localhost' IDENTIFIED WITH mysql_native_password by '[你想设置的密码]';

然后退出mysql shell

接下来我们运行YCSB测试

获取YCSB

https://hub.yzuu.cf/brianfrankcooper/YCSB/releases/download/0.17.0/ycsb-0.17.0.tar.gz

或

https://github.com/brianfrankcooper/YCSB/releases/download/0.17.0/ycsb-0.17.0.tar.gz

如果wget下载太慢的话可以先在电脑上使用多线程下载工具下载到电脑上，然后上传到服务器上

传到服务器上后解压：

tar -xzvf ycsb-0.17.0.tar.gz

进入YCSB文

cd ycsb-0.17.0/

由于YCSB使用的Java语言编写，因此我们还需要JDK。不过系统以已经提前提供了JDK11，因此无需另外安装JDK。

登录数据库，创建数据库和表：​​​​​​​

create database ycsb;use ycsb;CREATE TABLE usertable (YCSB_KEY VARCHAR(255) PRIMARY KEY,FIELD0 TEXT, FIELD1 TEXT,FIELD2 TEXT, FIELD3 TEXT,FIELD4 TEXT, FIELD5 TEXT,FIELD6 TEXT, FIELD7 TEXT,FIELD8 TEXT, FIELD9 TEXT);

图片

 

编辑db.properties​​​​​​​

cd jdbc-binding/conf/mv db.properties db.properties.bakvim db.properties

db.properties内容如下：​​​​​​​

db.driver=com.mysql.cj.jdbc.Driverdb.url=jdbc:mysql://localhost:3306/ycsbdb.user=rootdb.passwd=[你的密码]

然后下载所需要的数据库驱动

wget

https://downloads.mysql.com/archives/get/p/3/file/mysql-connector-j-8.0.33.tar.gz

解压并将驱动安装到指定文件夹下：​​​​​​​

tar -xzvf mysql-connector-j-8.0.33.tar.gz cp mysql-connector-j-8.0.33/mysql-connector-j-8.0.33.jar ~/ycsb-0.17.0/jdbc-binding/lib/

载入数据：​​​​​​​

bin/ycsb load jdbc -P workloads/workloada -P ./jdbc-binding/conf/db.properties -cp ./jdbc-binding/lib/mysql-connector-j-8.0.33.jar

然后就是跑分时间：​​​​​​​

bin/ycsb run jdbc -P workloads/workloada -P ./jdbc-binding/conf/db.properties -cp ./jdbc-binding/lib/mysql-connector-j-8.0.33.jar

（上面两个步骤时间比较长，可以在等的时候顺便泡杯咖啡或者看一会番等等）

如果提示Python报错，那是因为YCSB使用的是Python 2代码，虽然有人试图将Python3支持与主仓库合并，但是却一直没有被合并进去（0.17.0依旧还是使用Python 2）。

先安装python2

sudo apt install python2

更改链接​​​​​​​

sudo rm /usr/bin/pythonsudo ln -s /usr/bin/python2 /usr/bin/python

测试一下：

python --version

如果提示Python 2.7.18那就说明已经成功将链接改到python 2了。

然后重新尝试执行载入数据并跑分

跑分结果：

[OVERALL], RunTime(ms), 1180970
[OVERALL], Throughput(ops/sec), 84.67615604122035
[TOTAL_GCS_Copy], Count, 127
[TOTAL_GC_TIME_Copy], Time(ms), 2214
[TOTAL_GC_TIME_%_Copy], Time(%), 0.18747300947526185
[TOTAL_GCS_MarkSweepCompact], Count, 6
[TOTAL_GC_TIME_MarkSweepCompact], Time(ms), 526
[TOTAL_GC_TIME_%_MarkSweepCompact], Time(%), 0.044539658077681905
[TOTAL_GCs], Count, 133
[TOTAL_GC_TIME], Time(ms), 2740
[TOTAL_GC_TIME_%], Time(%), 0.23201266755294375
[READ], Operations, 49947
[READ], AverageLatency(us), 1485119.70881134
[READ], MinLatency(us), 20192
[READ], MaxLatency(us), 66584575
[READ], 95thPercentileLatency(us), 3217407
[READ], 99thPercentileLatency(us), 3725311
[READ], Return=OK, 49947
[CLEANUP], Operations, 100
[CLEANUP], AverageLatency(us), 207285.48
[CLEANUP], MinLatency(us), 4828
[CLEANUP], MaxLatency(us), 6111231
[CLEANUP], 95thPercentileLatency(us), 999935
[CLEANUP], 99thPercentileLatency(us), 1299455
[UPDATE], Operations, 50053
[UPDATE], AverageLatency(us), 609746.7518030887
[UPDATE], MinLatency(us), 22224
[UPDATE], MaxLatency(us), 2666495
[UPDATE], 95thPercentileLatency(us), 1309695
[UPDATE], 99thPercentileLatency(us), 1539071
[UPDATE], Return=OK, 50053

总结：

从跑分结果来看，SG2042在数据库应用方面还是比较不错的，但是由于YCSB使用的是Python 2，而Python 2已于2020年1月1日停止支持，因此也希望YCSM尽快迁移到Python 3上。

参考资料：

MySQL中文官网：

https://www.mysql.com/cn/

YCSB的jdbc文档

https://github.com/brianfrankcooper/YCSB/tree/master/jdbc

Port ycsb to Python3 and also make it Python2 compatible #1421（Github）

https://github.com/brianfrankcooper/YCSB/pull/1421

MySQL server fails to build on RISC-V 64

https://bugs.mysql.com/bug.php?id=100356

正文完

  • About HS-2

HS-2 RISC-V通用主板是澎峰科技与合作伙伴共同研发的一款专为开发者设计的标准mATX主板，它预装了澎峰科技为RISC-V高性能服务器定制开发的软件包，包括各种标准bencmark、支持V扩展的GCC编译器、计算库、中间件以及多种典型服务器应用程序。

HS-2 RISC-V通用主板搭载了一颗国产RISC-V 64核处理器（SG2042）。SG2042是目前已量产的性能最高的RISC-V处理器，主要针对高性能计算领域需求设计，适用于科学计算、工程计算、AI计算、融合计算等大算力应用场景。

图片

  • 关于RISC-V公共测试平台

    图片

RISC-V高性能处理器公共测试云平台 ·快速使用指南，下载链接：https://www.kdocs.cn/l/cmnYcyFIlVRx

  • RISC-V公共测试云平台系列文章

  1.  RISC-V公测平台发布 ·Stream带宽完整测试

  2.  RISC-V公测平台发布 · 我的世界MohistMC

  3.  RISC-V公测平台发布 · 第一个WEB Server“Hello RISC-V world！”

  4.  RISC-V公测平台发布 ·如何在SG2042上玩转k3s

  5. “RISC-V成长日记” blog发布，第一个运行在RISC-V服务器上的blog?

  6. RISC-V公测平台发布：如何在SG2042上玩转OpenMPI

  7. RISC-V公测平台发布：Compiling The Fedora Linux Kernel Natively on RISC-V

  8.  RISC-V公测平台发布 · Unix Bench完整测试

  9. RISC-V公测平台发布 · 使用YCSB测试SG2042上的MySQL性能（本篇）

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.rhkb.cn/news/84053.html

如若内容造成侵权/违法违规/事实不符，请联系长河编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

【位操作符的几种题型】

【位操作符的几种题型】

位操作符的几种题型 目录 题型一：寻找“单身狗”。 题型二：计算一个数在二进制中1的个数 题型三：不允许创建临时变量，交换两个整数的内容 题型一：寻找“单身狗”。 1.1题目解析 在一个整型数组中，只有…
阅读更多...
SUB-1G SOC芯片DP4306F 32 位 ARM Cortex-M0+内核替代CMT2380F32

SUB-1G SOC芯片DP4306F 32 位 ARM Cortex-M0+内核替代CMT2380F32

DP4306F是一款高性能低功耗的单片集成收发机，集成MO核MCU，工作频率可覆盖200MHiz^ 1000MHz。 支持230/408/433/470/868/915频段。该芯片集成了射频接收器、射频发射器、频率综合器、GFSK调制器、GFSK解调器等功能模块。通过SPI接口可以对输出功率、频道选…
阅读更多...
element-plus的日期选择器限定选择范围

element-plus的日期选择器限定选择范围

目录 前言一、最近30天总结 前言 提示：这里可以添加本文要记录的大概内容： element-plus的日期选择器限定选择范围，由于数据的获取范围限定，需要前端处理一下日期的选择范围 提示：以下是本篇文章正文内容&#xff0c…
阅读更多...
软考高级之系统架构师之数据通信与计算机网络

软考高级之系统架构师之数据通信与计算机网络

概念 OSPF 在划分区域之后，OSPF网络中的非主干区域中的路由器对于到外部网络的路由，一定要通过ABR(区域边界路由器)来转发，既然如此，对于区域内的路由器来说，就没有必要知道通往外部网络的详细路由，只要由…
阅读更多...
【计算机网络】概述及数据链路层

【计算机网络】概述及数据链路层

每一层只依赖于下一层所提供的服务，使得各层之间相互独立、灵活性好，已于实现和维护，并能促进标准化工作。 应用层：通过应用进程间的交互完成特定的网络应用，HTTP、FTP、DNS，应用层交互的数据单元被称为报…
阅读更多...
音频光耦合器

音频光耦合器

音频光耦合器是一种能够将电信号转换为光信号并进行传输的设备。它通常由发光二极管（LED）和光敏电阻（光电二极管或光敏电阻器）组成。 在音频光耦合器中，音频信号经过放大和调节后，被转换为电流信号&#xf…
阅读更多...
【密码学】六、公钥密码

【密码学】六、公钥密码

公钥密码 1、概述1.1设计要求1.2单向函数和单向陷门函数 2、RSA公钥密码体制2.1加解密2.2安全性分析 3、ElGamal公钥密码体制3.1加解密算法3.2安全性分析 4、椭圆曲线4.1椭圆曲线上的运算4.2ECC 5、SM2公钥密码体制5.1参数选取5.2密钥派生函数5.3加解密过程5.3.1初始化5.3.2加密…
阅读更多...
ThinkPHP6企业OA办公系统

ThinkPHP6企业OA办公系统

有需要请加文章底部Q哦 可远程调试 ThinkPHP6企业OA办公系统 一 介绍 勾股OA基于ThinkPHP6开发，前端Layui，数据库mysql，是一款实用的企业办公系统。可多角色登录，集成了系统设置、人事管理、消息管理、审批管理、日常办公、客户…
阅读更多...
pytest 用例运行方式

pytest 用例运行方式

一、命令行方式运行 执行某个目录下所有的用例，符合规范的所有用例 进入到对应的目录,直接执行pytest; 例如需要执行testcases 下的所有用例; 可以进入testcases 目录; 然后执行pytest 进入对应目录的上级目录,执行pytest 目录名称/ ; ; 例如需要执行testcases 下…
阅读更多...
【Android】在Windows11系统上运行VisualStudioEmulator forAndroid

【Android】在Windows11系统上运行VisualStudioEmulator forAndroid

这是一个x86架构处理器的安卓模拟器， 在Visual Studio开发工具上用的，也是运行在Hyper-V虚拟机上的，相比其它的模拟器的性能好，占用磁盘空间小，操作简洁方便，非常适合开发人员调试安卓手机模拟。 安装 首…
阅读更多...
K8S系列文章之 Traefik快速入门

K8S系列文章之 Traefik快速入门

traefik 与 nginx 一样，是一款优秀的反向代理工具，或者叫 Edge Router。至于使用它的原因则基于以下几点 无须重启即可更新配置自动的服务发现与负载均衡与 docker 的完美集成，基于 container label 的配置漂亮的 dashboard 界面metrics 的支…
阅读更多...
要实现智能制造到底有多难？先看看这一步...

要实现智能制造到底有多难？先看看这一步...

是新朋友吗？记得先点上方蓝字关注Ruff 智能制造、数字化转型，已成为当下制造业最炙手可热的话题，政府工作报告中已多次提到，为了促进数字经济发展，加强数字中国建设整体布局，打造智能工厂、智慧工厂。愿景是…
阅读更多...
论文阅读---《Unsupervised Transformer-Based Anomaly Detection in ECG Signals》

论文阅读---《Unsupervised Transformer-Based Anomaly Detection in ECG Signals》

题目：基于Transformer的无监督心电图（ECG）信号异常检测 摘要 异常检测是数据处理中的一个基本问题，它涉及到医疗感知数据中的不同问题。技术的进步使得收集大规模和高度变异的时间序列数据变得更加容易，然而&#xff…
阅读更多...
SEO搜索引擎优化

SEO搜索引擎优化

目录 场景 内部业务To B (Business-to-Business，B2B)需要降低SEO，反爬 客户业务To C (Business-to-Consumer，B2C)需要提高SEO TDK优化 Title（标题） Description（描述） Keywords&#xff…
阅读更多...
matplotlib 笔记 plt.grid

matplotlib 笔记 plt.grid

用于添加网格线 主要参数 visible 布尔值，True表示画网格 which表示要显示的刻度线类型，可以是 major（主刻度）或 minor（次刻度），或者同时显示（both）alpha 透明度 …
阅读更多...
Effective Java笔记（27）消除非受检的警告

Effective Java笔记（27）消除非受检的警告

用泛型编程时会遇到讲多编译器警告 ： 非受检转换警告（ unchecked cast warning ）、非受检方法调用警告、非受检参数化可变参数类型警告（ unchecked parameterized vararg type warning），以及非受检转换警告…
阅读更多...
【Pyhthon实战】Python对全校电费查询采集并可视化分析

【Pyhthon实战】Python对全校电费查询采集并可视化分析

前言 今天，我来说说怎么抓取宿舍电费的过程。我们学校是在完美校园交电费的，我们可以不用取抓包完美校园的数据接口，我们可以直接登录学校的一卡通网站，每个学校都有，大家可以自己找找，这里我为什么要抓包呢，因为学校提供的网站已经打不开了，这里就不介绍怎么抓包了。 …
阅读更多...
9篇论文速览 ICML 2023 测试时自适应（TTA）最新研究进展

9篇论文速览 ICML 2023 测试时自适应（TTA）最新研究进展

测试时自适应对于领域转移下真实机器感知应用的成功至关重要，近年来，研究者们仍然在不断优化现有的方法。在今年的ICML中，TTA相关的研究也有了最新进展。 1.Uncovering Adversarial Risks of Test-Time Adaptation 标题：揭示测试…
阅读更多...
Java 常用编辑器 IntelliJ IDEA

Java 常用编辑器 IntelliJ IDEA

文章目录 IDEA 概述IDEA 下载和安装IDEA 中的第一个代码IDEA 的项目和模块操作（一）类的操作（二）模块的操作（三）项目的操作 IDEA 概述 IntelliJ IDEA是一款由JetBrains开发的集成开发环境（IDE&am…
阅读更多...
git【潦草学习】

git【潦草学习】

初始配置git 查询版本号 初次使用git前配置用户名与邮箱地址 git config --global user.name "your name" git config --global user.email "your email" git config -l 发现最后两行多出了用户名和邮箱，说明配置成功
阅读更多...
最新文章
推荐文章

Copyright @ 2022~2023