Valkey 是一种开源软件,作为内存数据结构服务器,可用作数据库、应用缓存和消息代理。它以键存储值,并提供用于操作字符串、列表、集合、哈希、有序集合、流及其他专用结构的命令。2024 年 3 月,Redis 更改了其后续版本的许可证,此后该项目作为 Redis 的软件分叉诞生。Valkey 在 Linux 基金会的支持下开发,并采用宽松的 BSD 三条款许可证分发。
起源与治理
Valkey 基于采用 BSD 三条款许可证的 Redis 7.2.4 创建。2024 年 3 月,Redis 宣布后续版本将改用 Redis 源码可用许可证第 2 版和服务器端公共许可证第 1 版,不再沿用此前的 BSD 许可证。这些许可证规定的条件不同于既有的宽松许可模式。
同月稍晚,Linux 基金会宣布成立 Valkey 项目,由社区主导,继续开发采用 BSD 许可证的代码库。最初的支持者包括亚马逊云科技、Google Cloud、甲骨文、爱立信和 Snap。多位具有 Redis 维护经验的贡献者加入了这一新项目。
这一分叉保留了独立开发和再分发现有 BSD 许可代码的权利,不受上游项目许可证变更的影响。Valkey 拥有自己的维护者、技术治理机制、发布流程和开发重点。因此,它与 Redis 的关系在于两者同源,而不意味着两个项目永久承诺实现完全相同的功能。
数据模型与命令
Valkey 采用键值模型,但其值并不限于不透明的字节序列。每种受支持的数据结构都有操作其内容的命令,使相关处理能够在服务器端完成,而不必要求应用程序取回整个值、修改后再整体写回。
核心类型包括:
- 字符串: 二进制安全的值,可容纳文本、序列化对象或数字表示。命令支持替换、拼接和递增等操作。
- 列表: 有序序列,支持在两端插入和移除元素,也支持按索引和范围访问。
- 集合: 成员不重复的集合,支持成员存在性判断、并集、交集和差集等操作。
- 哈希: 字段与值组成的键值对集合,常用于表示记录。
- 有序集合: 每个唯一成员都关联一个数值分数,支持排名和按分数范围查询。
- 流: 以追加为主、由带标识符的条目组成的集合,包含用于分配处理任务的消费者组机制。
其他功能包括位图、使用 HyperLogLog 进行近似基数估计,以及地理空间操作。
键可以设置过期时间。过期机制适用于临时会话记录、短期有效的凭据和缓存查询结果等场景。过期与淘汰不同:过期依据键的生存期限移除数据,而淘汰则依据配置的内存策略移除数据。
Valkey 通常被归类为 NoSQL数据库系统。与关系数据库不同,它并不主要通过表格来组织信息,也不以声明式联接和通用 SQL 查询作为主要访问方式。应用程序通常通过键和特定于数据类型的命令来实现访问模式。
架构与协议
Valkey 采用客户端—服务器模型。应用程序通过客户端库连接服务器,并使用 Redis 序列化协议(通常缩写为 RESP)发送命令。由于保留了这一协议以及大量继承而来的命令接口,许多现有的 Redis 客户端和应用程序都能与 Valkey 配合使用。
服务器架构以事件循环和高效的内存操作为核心。Valkey 也使用后台任务和多线程 I/O 机制,其行为和适用范围取决于具体版本与配置。网络处理采用多线程,并不意味着每条命令都会在所有处理器核心上并发执行。
命令的执行开销取决于操作类型和数据规模。简单查询的开销可能很低,而扫描大型集合、返回大型响应或运行耗时脚本,则可能长时间占用服务器资源。内存存储降低了常规操作对磁盘访问的依赖,但并不意味着所有命令都同样快速。
客户端可以使用流水线连续发送多条命令,无须等待上一条命令的回复后再发送下一条。这能减少网络往返次数,但本身并不提供事务隔离。
原子操作与事务
相对于其他客户端命令,许多单条 Valkey 命令会作为原子操作执行。例如,递增命令可以避免客户端分别读取值、在本地修改、再写回时可能出现的竞争条件。
Valkey 还支持通过 MULTI 和 EXEC 成组执行命令。这些数据库事务在执行队列中的命令时,不会穿插执行其他客户端的命令。WATCH 提供乐观并发控制:如果受监视的键在事务提交前发生变化,就可以取消执行。
这些机制不同于许多关系型系统中的事务。尤其是,当队列中的某条命令发生运行时错误时,通常不会回滚已经执行的命令。原子执行不应与不受限制的回滚能力或持久性保证混为一谈。
服务器端 Lua 脚本可以组合多项操作,同时避免中间步骤中的客户端网络往返。长时间运行的脚本可能延误其他任务,而集群部署会限制脚本能够访问的键。
持久化与复制
虽然 Valkey 通常从内存中提供对工作数据集的访问,但它也可以将数据持久化到存储设备。
RDB 快照记录数据集在某一时刻的状态。它们可用于保存紧凑的数据映像和恢复数据,但最近一次成功快照之后的更改可能在故障后丢失。
仅追加文件(AOF)记录写操作,以便重建数据集。同步策略控制缓冲数据写入持久存储的频率,需要在写入开销和潜在数据丢失之间权衡。重写机制会压缩日志,而不是保留无限增长的完整操作历史。
持久化可以关闭,也可以仅启用其中一种机制,或同时配置两种机制。持久化并不等同于独立的数据备份策略:意外删除或其他不需要的更改,也可能成为持久化状态的一部分。
Valkey 支持主副本式数据库复制。副本接收主节点的更新,可以承担读取请求,也可以在发生故障后成为提升为主节点的候选者。复制通常是异步的,因此从副本读取的数据可能落后于主节点。等待复制确认的命令能够降低某些数据丢失风险,但不会使系统变成基于共识的强一致性数据库。
可用性与集群
Valkey 提供了两种主要机制,用于突破单台独立服务器的运行模式。
Sentinel 监控主节点和副本实例,检测故障、协调故障转移,并帮助客户端发现当前的主节点。它解决的是可用性问题,不会自动将数据集分区到多个主节点上。
Valkey Cluster 将键分配到 16,384 个哈希槽中,再将这些槽分配给各个主节点。副本提供故障转移能力,支持集群的客户端则将请求路由到相应节点,或按照重定向信息转发请求。
集群会对多键操作施加限制。需要同时使用多个键的命令,通常要求这些键位于同一个哈希槽。哈希标签是键名中由花括号括起的指定子串,可用于将相关的键放在同一个槽中。
无论复制还是集群,都无法消除故障情境下的各种取舍。网络分区、复制延迟和故障转移时机,都可能影响可用性以及已确认写入的数据能否保留。
应用与运行限制
常见应用包括缓存数据库查询结果、维护用户会话、实现计数器和速率限制、存储排名,以及协调短期应用状态。这些用途都受益于低延迟访问和针对特定数据结构设计的操作。
不同消息传递机制具有不同的投递特性。发布/订阅会将消息分发给当前已连接的订阅者,但不保留可供重放的历史记录。流会保留条目并支持消费者组,但可靠处理仍取决于确认处理、保留设置、持久化和应用程序的行为。
内存容量是运行中的核心限制。内存占用包括已存储的值、键、内部结构、内存分配器开销、客户端缓冲区,以及复制或持久化活动产生的占用。达到配置的内存上限时,Valkey 可以拒绝写入,或按照策略淘汰键。适合可丢弃缓存的淘汰策略,未必适合用作权威数据源的记录。
安全功能包括身份认证、访问控制列表和传输层安全协议(TLS)。这些功能的保护效果取决于配置和部署边界;命令访问权限可能使存储的数据集遭到暴露或修改。
兼容性与分化
Valkey 与 Redis 同源,因此兼容性是其生态系统的重要组成部分。许多使用 Redis 7.2 所提供命令的应用程序,只需少量修改即可迁移。不过,兼容性涉及多个不同层面:网络协议、命令行为、持久化格式、配置、复制和扩展接口。
与分叉起点兼容,并不保证与此后所有 Redis 功能或专有扩展兼容。Valkey 和 Redis 各自独立演进,混合版本能否协同运行,取决于涉及的具体版本和功能。