sparkey for Mac 版
恒定键值存储,最适合频繁读取/不频繁写入的使用
sparkey 是什么
Sparkey 是一个简单的持久化键值存储库,可以把它理解成磁盘上的只读哈希表。它主要面向读多写少、偶尔需要大批量导入数据的系统,提供 C 语言库(libsparkey)和命令行工具(sparkey),用于操作索引与日志文件、查询信息或读取值。
核心功能包括:支持 get、put、delete 和遍历操作;针对批量写入做了优化;哈希表不可变,允许任意数量的并发独立读者,但每个存储单元同时只允许一个写者;支持块级压缩,条目开销低,读取启动成本恒定,每次读取的磁盘寻道次数少;数据无关,只做字节数组到字节数组的映射,最大支持 2^63-1 字节的数据量。
它解决的是高频随机读取、低延迟、高吞吐场景下的数据服务问题。在 Spotify 的用例中,它用于向用户或其他服务提供很少更新的数据——快速高效的批量写入让定期重建数据变得可行,而快速随机访问读取则适合高吞吐低延迟的服务,部分服务甚至能在保持极低 CPU 占用的情况下跑满网络接口。
需要说明的是,它不是分布式键值存储,也不是压缩型数据存储(如有需要可在其上实现),并且不具备抵御数据损坏的能力。写入哈希过程需要按条目数分配约 16×1.3 字节的内存。适合需要轻量级、跨平台、读优化存储的开发者,官方提供 Python 和 Java 绑定,另有 Ruby、Node、Go、Rust 等非官方绑定。
核心功能包括:支持 get、put、delete 和遍历操作;针对批量写入做了优化;哈希表不可变,允许任意数量的并发独立读者,但每个存储单元同时只允许一个写者;支持块级压缩,条目开销低,读取启动成本恒定,每次读取的磁盘寻道次数少;数据无关,只做字节数组到字节数组的映射,最大支持 2^63-1 字节的数据量。
它解决的是高频随机读取、低延迟、高吞吐场景下的数据服务问题。在 Spotify 的用例中,它用于向用户或其他服务提供很少更新的数据——快速高效的批量写入让定期重建数据变得可行,而快速随机访问读取则适合高吞吐低延迟的服务,部分服务甚至能在保持极低 CPU 占用的情况下跑满网络接口。
需要说明的是,它不是分布式键值存储,也不是压缩型数据存储(如有需要可在其上实现),并且不具备抵御数据损坏的能力。写入哈希过程需要按条目数分配约 16×1.3 字节的内存。适合需要轻量级、跨平台、读优化存储的开发者,官方提供 Python 和 Java 绑定,另有 Ruby、Node、Go、Rust 等非官方绑定。
如何安装 sparkey
- 打开 终端(按 ⌘ + 空格,输入“终端”)。
- 如果还没安装 Homebrew,先运行下面这条安装命令。
- 运行下面这条命令:
最近 10 个版本记录
该项目暂未在 GitHub 发布 Release。
二进制包支持平台
Homebrew 官方提供的预编译包(bottle)覆盖:
- Apple 芯片 · 最新 macOS
- Apple 芯片 · macOS 26 Tahoe
- Apple 芯片 · macOS 15 Sequoia
- Apple 芯片 · macOS 14 Sonoma
- Apple 芯片 · macOS 13 Ventura
- arm64_monterey
- arm64_big_sur
- Intel · macOS 14 Sonoma
- Intel · macOS 13 Ventura
- Intel · macOS 12 Monterey
- big_sur
- Linux · ARM64
- Linux · x86_64
与同类应用对比
只对比公开元数据,不做主观推荐;需要逐项对比时见对比页。
| 应用 | 版本 | 许可证 | 架构 | 近 30 天安装 |
|---|---|---|---|---|
| sparkey | 1.0.0 | Apache-2.0 | 命令行 | 0 |
| licensor | v2.1.0 | MIT | 命令行 | 0 |
| wandio | 4.2.7-1 | LGPL-3.0-or-later | 命令行 | 39 |
| keyutils | 1.6.3 | GPL-2.0-or-later AND LGPL-2.0-or-later | 命令行 | 4 |
命令行工具中的类似应用
licensor
licensor 是一个把许可证文本直接输出到标准输出的命令行工具。你只需提供 SPDX 许可证 ID,它就能把对应的许可证内容打印出来;对于包含版权声明的…wandio
WANDIO 是一个用于文件读写的 C 库,最初由新西兰怀卡托大学的 WAND 研究组开发,采用 LGPL v3 许可。keyutils
keyutils 是一套用于 Linux 系统的密钥管理命令行工具,主要帮助用户在内核密钥管理框架下创建、查看、更新和删除密钥,并管理密钥环。openssl@4
OpenSSL 是一套开源、商用级、功能完整的加密工具箱,主要服务于 TLS(早期称 SSL)、DTLS 和 QUIC 协议。xz
XZ Utils 是一个通用数据压缩库,同时附带命令行工具。它的原生格式是 .xz,也兼容旧的 .lzma 格式。pkgconf
pkgconf 是一个用于配置开发库编译器和链接器标志的程序,功能上是 freedesktop.org 的 pkg-config 的超集,但不追求与原版 p…所属分类:命令行工具