跳至主要內容
  • Hostloc 空間訪問刷分
  • 售賣場
  • 廣告位
  • 賣站?

4563博客

全新的繁體中文 WordPress 網站
  • 首頁
  • 自己做了一个轻量级的 NoSQL 数据库
未分類
22 11 月 2020

自己做了一个轻量级的 NoSQL 数据库

自己做了一个轻量级的 NoSQL 数据库

資深大佬 : okcdz 3

给大家介绍一个个人作品,叫 PoloDB,一个非常轻量级的 NoSQL 数据库,有着类似 MongoDB 的 API,主打几个特性:

轻量级

没有像 MySQL 那样的独立进程,它可以编译成静态库或者动态库,集成在你的应用里面,像 SQLite 一样。

只需要很少资源就能够启动,不像 MongoDB,需要很强大的电脑,很适合分发到用户的设备上去。一般来说,用户的设备的配置不像服务器那么强大。比如你想在普通用户的 PC 甚至手机上运行一个重量级数据库,几乎不可能。如果一个客户端需要一个数据库,那么就需要这种轻量级的数据库。

在磁盘上就只有一个文件,很容易传输、分发、备份。不需要再打包,导出。

可移植性

PoloDB 是用 Rust 写的,可以运行在大多数平台上。目前来说,我已经让它支持了 X86 上的 macOS,Linux 和 Windows 。之后,支持移动平台( iOS/Android )也在计划之中。像树莓派、龙芯、M1,应该也没问题。

PoloDB 还支持非常丰富的语言绑定。C/C++ 和 Rust 可以直接使用。现在已经可以通过 Python 和 Node.js 来使用 PoloDB 了,适配层已经开发完。以后越来越多语言可以接入。

灵活性

NoSQL 数据库,可以像 MongoDB 一样使用,很灵活。数据操作读写都是通过 JSON,不需要创建 schema,打开数据库直接可以插入数据。

现在的应用都迭代非常快,如果需要一种非常灵活,可以快速支持各种需求的数据库,像 PoloDB 这种 NoSQL 就很合适。

功能齐全

虽然说是轻量级的数据库,但是一个数据库该有的功能,PoloDB 也不会落下。比如说,现在已经支持原子提交(事务)。以后像数据索引这一类数据库该有的功能也会慢慢提供。之后通过拓展 API,会有越来越多的功能加进来,比如数据加密、数据备份、数据处理等等,有很大的想象空间。当然这些拓展功能都是可选的,因为要保持数据库本身是轻量级的。

我现在看到很多人,很多应用喜欢把数据存到 JSON 文件里面。有了 PoloDB 之后,可能就会更加优雅。除了可以用上数据库的功能,也可以防止一下子把大量数据读到内存。因为 PoloDB 里面通过自身结构可以只读取你需要的那一部分数据,对性能大有益处。写入也是同理的。

开源

现在来说这是我的一个业余的个人项目,我都是用下班时间来写的。代码都开源在 Github 上面。大家喜欢的话,可以自行下载、review 里面的实现细节。我感觉 PoloDB 还是一个蛮有意思的项目,所以源码也和大家分享。最重要的,还是希望和大家交流。

当然了,这是我几个月前开始开发的项目,现在还是一个很早期的阶段,但是也已经基本可以跑起来了。这个项目看起来很精简、很轻量,但是里面实现的细节并不简单。接下来还有非常多的工作要做,比如写一些解释它工作原理的文档,写很多严格的单元测试,给各种平台、语言做适配。欢迎大家试用,提 issue 和 MR 。

Github 地址:https://github.com/vincentdchan/PoloDB

大佬有話說 (44)

  • 資深大佬 : lzz2394677796

    占位

  • 資深大佬 : wertasy

    妙啊

  • 資深大佬 : yangheng4922

    和 nedb 相比速度怎么样

  • 資深大佬 : kwanzaa

    马克下 有空试试

  • 資深大佬 : soli

    先 Star 了再说

  • 資深大佬 : yangheng4922

    https://s3.ax1x.com/2020/11/22/D3zKQU.png
    这是什么情况

  • 資深大佬 : sunmoon1983

    mark 有机会试下

  • 資深大佬 : sinex

    老哥, 我看了代码没找到 Write Ahead Log, 不做 WAL 不会不有丢数据的问题

  • 資深大佬 : dreampet

    有没有和其他同类数据库的对比数据? Benchmark 什么的

  • 資深大佬 : TaoQAQ

    为什么要做这样的数据库?为了更快速的产出 MVP 功能?

  • 主 資深大佬 : okcdz

    @sinex 有的,在 journal.rs 里面

  • 主 資深大佬 : okcdz

    @yangheng4922 不好意思,因为你重复创建 collection 了,应该不允许这个操作,我晚点修复一下。

    第一次创建完,第二次可以用 db.colletion(‘students’) 获取

  • 主 資深大佬 : okcdz

    @yangheng4922 @dreampet 关于性能,等功能稳定之后,会做一次 benchmark,不过目前来说,性能不是首要目标

  • 資深大佬 : ericgui

    这项目不错啊

  • 資深大佬 : ashine

    我大 PHP 这么没排面吗,居然没有支持计划。[手动狗头]

  • 資深大佬 : yghack

    Star

  • 主 資深大佬 : okcdz

    @yangheng4922 刚刚推了一个 0.3.1 修复了这个问题,可以更新试试,感谢反馈

  • 主 資深大佬 : okcdz

    @TaoQAQ 其实上面有写,一个是灵活性和快速迭代,一个是轻量级,占用少资源,还有移植性,主要针对客户端

  • 主 資深大佬 : okcdz

    @ashine 哈哈哈,我 mark 一下。其实主要是后端都有大把成熟,好用的 db 了,我做这个主要给客户端用的。php 估计得靠后了。

  • 資深大佬 : wongy

    赞

  • 資深大佬 : itcastcn

    支持开源

  • 資深大佬 : summerwar

    python 的 文档点进去 404 麻烦写个好测试

  • 資深大佬 : VHacker1989

    既然针对客户端移植到安卓会有市场

  • 主 資深大佬 : okcdz

    @summerwar 正在写,这两天内 push 上去

  • 主 資深大佬 : okcdz

    @VHacker1989 在计划中了,只需要编译到 arm 然后写一个 java 或者 kotlin 转换层就可以跑了

  • 資深大佬 : wzzzx

    秒啊,期待主的文档哈哈哈哈

  • 資深大佬 : b00tyhunt3r

    支持

    想问下一般什么样的业务需要在客户端上安装一个小型数据库?

  • 資深大佬 : way2explore2

    我也一直想做一个 mongo lite db,但一直没开始动手做。:) 必须 mark

  • 資深大佬 : kisshere

    没 PHP 你至少丢掉 80%的目标用户

  • 資深大佬 : cmdOptionKana

    @b00tyhunt3r 很多,sqlite 就经常被嵌进客户端。比如词典、笔记类、日历、小游戏… 不是非得用数据库,但用了确实方便很多。

  • 資深大佬 : AndyAO

    对你的行为表示赞赏.

  • 資深大佬 : yangheng4922

    https://s3.ax1x.com/2020/11/22/DGurOH.md.png
    还是有问题
    还有你说的重复创建的问题 `db.createCollection(‘students’)` 好像执行了 createCollection 方法数据库里面有了这个集合重新运行代码的时候就会报错 说集合已存在 感觉这个机制有点怪怪的

    我全选的代码运行时正常的 重新运行一下就报错了
    `collection name ‘students’ already exists`

  • 資深大佬 : yangheng4922

    全选 => 全新

  • 主 資深大佬 : okcdz

    @yangheng4922 createCollection 这个函数用于创建集合,如果数据库已经存在了,应该用 .collection(‘students’) 来获取,而不是 createCollection

    我猜你之前的 db 可能已经因为之前的 bug 有点问题了,删了重新运行一下呢?

    不过我猜你想要的是不用 create,直接用 .collection 就可以插入的那种

    我们移步 Github issue 讨论?

  • 資深大佬 : xuewuchen

    呃~~mysql ,firebird ,sqlite,access….

  • 資深大佬 : hbolive

    先支持了再说!

  • 資深大佬 : ETO

    @ashine 如果你写 PHP,你会用吗?:)

  • 資深大佬 : wwatson

    @kisshere 客户端很少用 PHP 吧

  • 資深大佬 : KleinP

    为什么没有 C#,这么没牌面的吗

  • 資深大佬 : tikazyq

    感觉很棒啊!

  • 資深大佬 : llsquaer

    最近也是在找类似的裤子 … 先支持..

  • 資深大佬 : mlxj

    可以

  • 資深大佬 : abersheeran

    好东西!已经 Star 。

  • 資深大佬 : 2han9wen71an

    先给个 star

文章導覽

上一篇文章
下一篇文章

AD

其他操作

  • 登入
  • 訂閱網站內容的資訊提供
  • 訂閱留言的資訊提供
  • WordPress.org 台灣繁體中文

51la

4563博客

全新的繁體中文 WordPress 網站
返回頂端
本站採用 WordPress 建置 | 佈景主題採用 GretaThemes 所設計的 Memory
4563博客
  • Hostloc 空間訪問刷分
  • 售賣場
  • 廣告位
  • 賣站?
在這裡新增小工具