UnQLite:多语言支持的嵌入式NoSQL数据库深入解析

文章目录

    • 1. 引言
    • 2. Key/Value 存储接口
      • 2.1 关键函数
      • 2.2 使用示例
      • 2.3 高级操作:批量文件存储
    • 3. 游标的使用
    • 4. UnQLite-Python使用示例
    • 4. UnQLite数据库引擎架构
      • 5.1 Key/Value存储层
      • 5.2 文档存储层
      • 5.3 可插拔的存储引擎
      • 5.4 事务管理器与分页模块
      • 5.5 虚拟文件系统
    • 6. UNQlite VS SQLite
    • 7. 总结

1. 引言

UnQLite 是一个嵌入式的NoSQL数据库引擎,提供一个无需编写复杂SQL语句的方案,支持任意形式的数据存储。对于需要频繁操作JSON数据的应用来说,UnQLite提供的JSON文档存储和读取特别方便,使得数据操作直观和高效,适合于各种嵌入式应用程序。

核心特性

  • Key/Value存储:灵活的键值存储,类似于Berkeley DB和LevelDB。
  • 事务支持:完整的ACID事务支持,确保数据一致性。
  • 多语言支持:支持C/C++、Python、Go、Perl和Lua等语言。

可以通过以下链接下载:UnQLite 下载页面。

2. Key/Value 存储接口

UnQLite的Key/Value存储接口适合存储原始数据。键和值都被视为字节数组,可以存储任意类型的数据,如字符串、二进制对象等。

2.1 关键函数

  • unqlite_kv_store(): 存储键值对。
  • unqlite_kv_append(): 追加数据到现有的键值对。
  • unqlite_kv_fetch_callback(): 通过回调函数获取数据。
  • unqlite_kv_delete(): 删除指定键的记录。

2.2 使用示例

以下代码介绍如何使用UnQLite的Key/Value存储接口执行基本操作:

#include <unqlite.h>int main(void) {unqlite *pDb;int rc;/* 打开数据库 */rc = unqlite_open(&pDb, "test.db", UNQLITE_OPEN_CREATE);if (rc != UNQLITE_OK) {return 1; /* 非0返回值表示错误 */}/* 存储记录 */rc = unqlite_kv_store(pDb, "test", -1, "Hello World", 11U);if (rc != UNQLITE_OK) {unqlite_close(pDb); /* 关闭数据库 */return 1;}/* 追加数据 */rc = unqlite_kv_append(pDb, "msg", -1, "Hello, ", 7U);if (rc == UNQLITE_OK) {rc = unqlite_kv_append_fmt(pDb, "msg", -1, "%d:%d:%d", 10, 16, 53);}if (rc != UNQLITE_OK) {unqlite_close(pDb); /* 关闭数据库 */return 1;}/* 删除记录 */rc = unqlite_kv_delete(pDb, "test", -1);if (rc != UNQLITE_OK) {unqlite_close(pDb); /* 关闭数据库 */return 1;}/* 关闭数据库 */rc = unqlite_close(pDb);if (rc != UNQLITE_OK) {return 1;}return 0; /* 0表示成功 */
}

2.3 高级操作:批量文件存储

可以将外部文件(如XML、音频文件等)直接存储到UnQLite数据库中,并在需要时通过简单的查询提取。

#include <unqlite.h>int store_files_in_db(int argc, char *argv[]) {unqlite *pDb;void *pMap;unqlite_int64 iSize;int rc;int i;/* 检查参数数量 */if (argc <= 1) {return 1; /* 错误:没有文件参数 */}rc = unqlite_open(&pDb, "test.db", UNQLITE_OPEN_CREATE);if (rc != UNQLITE_OK) {return 1;}for (i = 1; i < argc; ++i) {const char *zName = argv[i];rc = unqlite_util_load_mmaped_file(zName, &pMap, &iSize);if (rc != UNQLITE_OK) {unqlite_close(pDb);return 1;}rc = unqlite_kv_store(pDb, zName, -1, pMap, (unsigned int)iSize);unqlite_util_release_mmaped_file(pMap, iSize);if (rc != UNQLITE_OK) {unqlite_close(pDb);return 1;}}rc = unqlite_close(pDb);if (rc != UNQLITE_OK) {return 1;}return 0;
}

3. 游标的使用

游标允许遍历整个数据库的记录,适用于需要顺序访问或修改记录的场景。

游标操作示例

#include <unqlite.h>/* 假设DataConsumerCallback函数已定义 */int traverse_records(void) {unqlite *pDb;unqlite_kv_cursor *pCursor;unqlite_int64 iData;int rc;rc = unqlite_open(&pDb, "test.db", UNQLITE_OPEN_CREATE);if (rc != UNQLITE_OK) {return 1;}rc = unqlite_kv_cursor_init(pDb, &pCursor);if (rc != UNQLITE_OK) {unqlite_close(pDb);return 1;}rc = unqlite_kv_cursor_last_entry(pCursor);if (rc != UNQLITE_OK) {unqlite_kv_cursor_release(pDb, pCursor);unqlite_close(pDb);return 1;}while (unqlite_kv_cursor_valid_entry(pCursor)) {/* Consume the key */rc = unqlite_kv_cursor_key_callback(pCursor, DataConsumerCallback, 0);if (rc != UNQLITE_OK) {unqlite_kv_cursor_release(pDb, pCursor);unqlite_close(pDb);return 1;}/* Extract data length */rc = unqlite_kv_cursor_data(pCursor, NULL, &iData);if (rc != UNQLITE_OK) {unqlite_kv_cursor_release(pDb, pCursor);unqlite_close(pDb);return 1;}/* Consume the data */rc = unqlite_kv_cursor_data_callback(pCursor, DataConsumerCallback, 0);if (rc != UNQLITE_OK) {unqlite_kv_cursor_release(pDb, pCursor);unqlite_close(pDb);return 1;}/* Move to the previous record */rc = unqlite_kv_cursor_prev_entry(pCursor);if (rc != UNQLITE_OK && rc != UNQLITE_DONE) {unqlite_kv_cursor_release(pDb, pCursor);unqlite_close(pDb);return 1;}}unqlite_kv_cursor_release(pDb, pCursor);rc = unqlite_close(pDb);if (rc != UNQLITE_OK) {return 1;}return 0;
}

4. UnQLite-Python使用示例

下面是如何在 Python 中使用 UnQLite 的简要介绍,并展示了基本的操作示例。
可以通过pip3 install unqlite安装Python组件。

import unqlite  def main():  try:  # 打开数据库  with unqlite.UnQLite('test.db', unqlite.OPEN_CREATE) as db:  # 存储记录  db['test'] = 'Hello World'  print("Stored record: 'Hello World'")  # 追加数据  db['msg'] = db.get('msg', '') + 'Hello, '  db['msg'] += f"{10}:{16}:{53}"  print("Appended to 'msg':", db['msg'])  # 删除记录  if 'test' in db:  del db['test']  print("Deleted record: 'test'")  else:  print("Record 'test' not found.")  # 检查 'test' 是否已经删除  if 'test' in db:  print("Failed to delete record 'test'.")  else:  print("Record 'test' successfully deleted.")  except Exception as e:  print(f"Error: {e}")  if __name__ == "__main__":  main()

4. UnQLite数据库引擎架构

在这里插入图片描述
UnQLite采用分层架构设计,主要由以下几个关键组件构成:

5.1 Key/Value存储层

UnQLite的核心是一个标准的键/值存储层,类似于BerkeleyDB和LevelDB。它支持ACID事务和并发读取,键和值均为字节数组,能存储各种类型的数据(如ASCII字符串、二进制数据)。该层通过一组接口与主机应用程序交互,接口包括unqlite_kv_store()unqlite_kv_append()unqlite_kv_fetch_callback()等。

5.2 文档存储层

文档存储层用于存储JSON文档,由Jx9编程语言驱动。Jx9是一种嵌入式脚本语言,具备图灵完备性和动态类型特性,语法类似于C和JavaScript。作为扩展语言,Jx9允许在数据库层直接操作JSON格式的数据,提供了强大的文档处理能力。

5.3 可插拔的存储引擎

UnQLite支持多种可插拔的存储引擎,如Hash、B+树、R+树、LSM等。内置的存储引擎包括用于持久化数据库的虚拟线性哈希(VLH)引擎和用于内存数据库的哈希表或红黑树引擎。这种设计使得UnQLite可以根据不同应用场景选择最合适的存储引擎。

5.4 事务管理器与分页模块

分页模块负责从磁盘读写固定大小的块(默认为4096字节),并管理缓存。它还提供回滚和原子提交的功能,确保数据操作的安全性和效率。存储引擎通过页面缓存与分页模块进行交互,处理数据的修改、提交或回滚请求。

5.5 虚拟文件系统

为了实现跨平台兼容性,UnQLite设计了一个抽象的虚拟文件系统(VFS),用于不同操作系统间的移植。每个操作系统都有其专属的VFS实现,这确保了UnQLite可以在POSIX和Win32/64等系统上运行。

6. UNQlite VS SQLite

  • 缓存机制

    • UnQLite首次查询较慢,涉及磁盘访问和数据预处理(如FastJSON解码)。
    • 后续查询利用内存中的缓存,速度更快。
  • 性能测试结果

    • UnQLite内存中
      • 存储:901.9毫秒
      • 查询:2586毫秒
    • UnQLite本地磁盘上
      • 存储:15223.3毫秒
      • 查询:114.2毫秒
    • SQLite内存中
      • 存储:9507毫秒
      • 查询:105毫秒
  • 性能比较

    • 内存中,UnQLite存储速度比SQLite快,但查询速度较慢。
    • 本地磁盘上,UnQLite查询速度比SQLite快,但存储速度较慢。

7. 总结

UnQLite采用分层设计和灵活架构,能够满足多种嵌入式数据库需求。它支持多种编程语言,使用简单,易于上手。除了键值存储外,UnQLite还具备强大的文档存储和跨平台功能。通过结合文档存储、游标和键值接口,也可以开发出复杂的嵌入式数据库应用。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/411329.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

游戏开发设计模式之模板方法模式

目录 模板方法模式在游戏开发中的具体应用案例是什么&#xff1f; 如何在不同类型的游戏&#xff08;如角色扮演游戏、策略游戏等&#xff09;中实现模板方法模式&#xff1f; 模板方法模式与其他设计模式&#xff08;如观察者模式、状态模式等&#xff09;相比&#xff0c;…

物联网平台与边缘计算平台,ThingsKit与AIoTedge

物联网平台和边缘计算平台是现代智能系统中不可或缺的组成部分&#xff0c;它们共同支撑着设备的连接、数据的收集和智能分析等功能。ThingsKit和AIoTedge是两个专注于不同层面的平台&#xff0c;它们各自具有独特的特点和优势。 ThingsKit是一个运行在云端的通用物联网平台&am…

深度学习项目实践——qq聊天机器人(transformer)(一)原理介绍

文章目录 首先第一步——QQ是如何实现实时聊天数据传输过程1. 用户发送消息的开始2. 数据封装与加密3. 建立连接&#xff1a;WebSocket协议的应用4. 消息的传输过程5. 接收者获取消息6. 双向通信与实时性保障7. 保持连接与断线重连 第二步——聊天机器人是如何来接管QQ账号的组…

论文阅读笔记:RepViT: Revisiting Mobile CNN From Vit Perspective

文章目录 RepViT: Revisiting Mobile CNN From Vit Perspective动机现状问题 贡献实现Block设置独立的token融合器和通道融合器减少膨胀并增加宽度 宏观设计stem的早期卷积简单分类器整体阶段比率 微观设计内核大小选择Squeeze-and-excitation层放置网络架构 实验ImageNet-1K上…

Jmeter(十四)Jmeter分布式部署测试

单个接口测试&#xff0c;我们使用谷歌的插件postman 多个接口测试&#xff0c;我们使用Jmeter进行测试 一、使用工具测试 1、使用Jmeter对接口测试 首先我们说一下为什么用Posman测试后我们还要用Jmeter做接口测试&#xff0c;在用posman测试时候会发现的是一个接口一个接…

存储架构模式之复制架构

存储类问题处理框架图 故障&#xff1a;机器挂掉 灾难&#xff1a;自然灾害 多活&#xff1a;技术复杂度高、成本高 高可用的关键指标 stag1是正常状态&#xff0c;系统和业务都是正常的 stag2是故障状态&#xff0c;系统和业务都是异常的 stag3是系统恢复正常&#xff0c…

docker maven 构建的找不到 ClassNotFoundException

Exception in thread "main" java.lang.ClassNotFoundException: com.baimeidashu.springbootdemo1.Springbootdemo1Application 我用idea 自带的 maven 构建的jiar包没&#xff0c;没问题&#xff0c; 但是用 docker 镜像 maven:3.6.0-jdk-8-alpine 构建的就出问…

Oracle发邮件时SMTP服务器配置方法与步骤?

Oracle发邮件功能如何配置&#xff1f;如何优化Oracle发信性能&#xff1f; 为了实现自动化报告和通知&#xff0c;Oracle发邮件功能变得尤为重要。通过配置SMTP服务器&#xff0c;Oracle可以轻松地发送电子邮件。AokSend将详细介绍如何配置Oracle发邮件时的SMTP服务器&#x…

收藏夹里的“小网站”被误报违规不让上怎么办?如何将Chrome和Edge安装到 D 盘(含用户数据),重装系统也不会丢失收藏夹和密码?

当你用国产浏览器访问网站的时候&#xff0c;有时候会显示这个&#xff1a; 如果确实是违规网站&#xff0c;不让访问也没什么&#xff0c;但是很多都是误报啊&#xff0c;你这样直接来个大红横幅&#xff0c;还让人活不&#xff1f; 那遇到这种误报应当怎么办呢&#xff1f;有…

爆火的《黑神话:悟空》对LabVIEW软件开发的启示

近期&#xff0c;《黑神话&#xff1a;悟空》在全球范围内爆火&#xff0c;引发了游戏行业和玩家群体的广泛关注。作为一款由中国开发团队Game Science历时多年打造的动作角色扮演游戏&#xff0c;它的成功不仅源于卓越的技术创新和对中国传统文化的深度挖掘&#xff0c;更在于…

翻译_Clock Domain Crossing Design

翻译_Clock Domain Crossing Design 原文标题及连接:Clock Domain Crossing (CDC) Design & Verification Techniques Using SystemVerilog. 作者:Clifford E. Cummings Sunburst Design, Inc. cliffc@sunburst-design.com 摘要 在多时钟设计中,需要在时钟域交叉(…

【Java】—— Java面向对象基础:使用Java模拟银行账户与客户交易系统

目录 账户类&#xff08;Account&#xff09; 客户类&#xff08;Customer&#xff09; 测试类&#xff08;CustomerTest&#xff09; 运行结果 在今天的博文中&#xff0c;我们将通过Java编程语言来模拟一个简单的银行账户与客户交易系统。这个系统将包括两个主要类&#…

09.定时器02

#include "reg52.h"sbit led P3^6;void delay10ms() { //1. 配置定时器0工作模式位16位计时TMOD 0x01;//2. 给初值&#xff0c;定一个10ms出来TL00x00;TH00xDC;//3. 开始计时TR0 1;TF0 0; } void main() {int cnt 0;led 1;while(1){if(TF0 1)//当爆表的时候&a…

Open3D mesh 去除噪点

目录 一、概述 1.1去除噪点的方法 1.2应用 二、代码实现 三、实现效果 3.1原始点云 3.2添加噪声的mesh Open3D点云算法汇总及实战案例汇总的目录地址&#xff1a; Open3D点云算法与点云深度学习案例汇总&#xff08;长期更新&#xff09;-CSDN博客 一、概述 在三维网格…

LeetCode刷题:1 两数之和

1. 两数之和 暴力解法:O(N^2) //给定一个整数数组 nums 和一个整数目标值 target&#xff0c;请你在该数组中找出 和为目标值 target 的那 两个 整数&#xff0c;并返回它们的数组下标。 // // 你可以假设每种输入只会对应一个答案&#xff0c;并且你不能使用两次相同的元素。…

list的使用及其相关知识点

目录 ◉list的底层逻辑 ◉关于list的新增功能 ▲splice功能 ▲remove函数 ▲unique函数 ▲merge函数 ▲sort函数 ▣迭代器类型 ▲reverse函数 作为数据容器之一的list和其他容器的使用上有很多相似的地方&#xff0c;比如都有大致相同的构造函数&#xff0c;大致相同的头插尾插…

【Java】—— Java面向对象基础:Java中如何创建和使用三角形类(TriAngle)来计算面积

目录 第一步&#xff1a;定义TriAngle类 第二步&#xff1a;编写TriAngleTest测试类 运行程序 总结 在Java编程中&#xff0c;面向对象的编程思想是一种非常强大的工具&#xff0c;它允许我们将现实世界中的实体&#xff08;如三角形&#xff09;抽象成程序中的类&#xff…

Python+tkinter实现2048游戏

游戏规则 2048 是一个单人拼图游戏&#xff0c;目标是通过滑动方块将相同数字的方块合并&#xff0c;最终得到一个数字为 2048 的方块。 游戏在一个 4x4 的网格上进行&#xff0c;初始时有两个方块&#xff0c;每个方块的值为 2 或 4。玩家可以通过上下左右方向键滑动方块&am…

微服务间调用

一、restTemplate 1、先将restTemplate注册成为一个bean Configuration public class RemoteCallConfig {Beanpublic RestTemplate restTemplate() {return new RestTemplate();} }2、实现代码 private void handleCartItems(List<CartVO> vos) {// TODO 1.获取商品id…

【C++ Primer Plus习题】6.4

问题: 解答: #include <iostream> using namespace std;const int strsize 40; const int usersize 40;typedef struct _Bop {char fullname[strsize];char title[strsize];char bopname[strsize];int preference; }Bop;Bop bop_user[usersize] {{"Wimp Macho&q…