发表于2024-12-24
Redis是当下极为流行的开源键值数据结构服务器。它提供了多种功能,可在此之上构建多种平台。
本书定位为实用指南,旨在帮助读者深入理解Redis数据结构,以便充分发挥Redis的优秀功能。读者的Redis之旅始于对Redis需求的讨论,然后讲解了高级键管理方面的内容。接下来,读者将学习设计模式、在DevOps环境中使用Redis的*佳实践,以及Docker容器化范式。在这之后,读者将学习如何使用Redis集群和Redis Sentinel进行扩展,随后将对Redis与其他NoSQL技术(如ElasticSearch和MongoDB)的结合进行说明。*后,读者将了解如何使用Redis为不相同的数据流构建实时数据分析仪表板。
◎探索Redis 3.2中的新增功能
◎选择正确的Redis数据结构解决问题
◎理解Redis事件循环并实现自定义C命令
◎使用Redis服务器端脚本Lua解决复杂的工作流问题
◎配置Redis实例以达到*佳内存管理
◎使用Redis集群实现数据的分布式
◎使用Redis Sentinel提升Redis解决方案的稳定性
◎将Redis用作现存的数据库和NoSQL环境的补充方案
◎充分利用Redis提供的各种功能,成为一位DevOps专家
让你的Redis技能产生质的飞跃,让开发酷炫应用从此轻而易举
本书以由浅入深、由原理到应用场景的方式介绍了Redis 这款NoSQL 数据库产品。书中不仅细致地讲解了Redis 中的数据结构及流行的使用模式,还针对Redis 键的设计和管理,以及内存管理提出了建设性的方案。同时,作者深入Redis 源码,将其内部构造通过源代码调试的方式进行呈现。本书适合有一定NoSQL 经验的开发者或者架构师阅读。读者可以从书中找到许多应用场景和解决方案,例如Docker 部署、Redis 消息队列、基于Redis 的ETL 应用和基于Redis 的机器学习等。
汪佳南,拥有7年软件开发经验。对编程情有独钟,对产品设计很“感冒”,始终坚信技术可以改变世界。《RabbitMQ实战 高效部署分布式消息队列 》一书译者。
Jeremy Nelson是科罗拉多斯普林市的一所四年制私立文理学院科罗拉多学院的一位元数据和系统图书管理员。除了每周 8小时的图书馆研究技术支持工作,为大学生提供信息素养指导,并监督图书馆的系统和编目部门这三项工作之外,Nelson正在积极研究和开发 Catalog Pull平台中的各种组件和开源工具,供科罗拉多大学、科罗拉多州研究图书馆联盟和国会图书馆使用。他还是语义网络初创公司 KnowledgeLinks.io的联合创始人和 CTO。
他之前在西部州科罗拉多大学和犹他大学有过图书馆工作经验。在成为图书管理员之前,他曾在各种软件公司和金融服务机构中担任程序员和项目经理。他的*一本书 Becoming a Lean Library于 2015年出版,将精益创业和精益制造理念应用于图书馆和图书馆的运营。 Nelson从诺克斯学院获得了本科学位,并从 University of Illinois Urbana-Champaign获得了图书馆和信息科学的科学硕士。
关于审校者
Emilien Kenler在从事了一些小型 Web项目之后,在 2008年高中时开始专注于游戏开发。直到 2011年,他为不同的小组工作并专门从事系统管理。
2011年,在研究计算机科学工程的同时,他创立了一家公司销售 Minecraft服务器。他基于像 Node.js和 RabbitMQ这样的新技术,创建了一个轻量级 IaaS(https://github.com/HostYourCreeper/)。
此后,他在 TaDaweb担任系统管理员,构建基础架构并创建管理部署和监控的工具。
2014年,他在东京 Wizcorp开启了新的历程。同年,他毕业于 University of Technology of Compiègne。
Emilien为 Packt Publishing编写了 MariaDB Essentials。他还负责了 Learning Nagios 4、 MariaDB High Performance、OpenVZ Essentials、Vagrant Virtual Development Environment Cookbook和 Getting Started with MariaDB-Second Edition的审校。
Saurabh Minni拥有计算机科学专业的工程学位。他有超过 10年的工作经验,通晓各种编程语言,包括汇编语言、 C、C++、Java、Delphi、JavaScript、Android、iOS、PHP、 Python、ZMQ、Redis、Mongo、Kyoto Tycoon、Cocoa、Carbon、Apache Kafka、Apache Storm和 ElasticSearch。总之,他是一位彻头彻尾的程序员,喜欢每天学习与技术相关的新事物。
目前,他在 Near公司(这是一家神奇的初创公司,正在搭建位置智能平台)中担任技术架构师一职。除了处理几个项目之外,他还负责部署 Apache Kafka集群。这有助于简化大数据处理系统中的数据消费。这些系统包括 Apache Storm、Hadoop,等等。
Saurabh同时也是 Apache Kafka Cookbook一书的作者。这是一本有关 Apache Kafka的书,由 Packt Publishing出版。他还负责 Learning Apache Kafka一书的审校。该书由 Packt Publishing出版。你可以在 Twitter上通过@the100rabh联系他,也可以在 https://github.com/the100rabh/上找到他。
目录
1 为何选择Redis? 1
合适之选? 2
尝试使用Redis 4
流行的使用模式 9
Redis不合心意?马上再试试! 11
总结 13
2 高级键管理与数据结构 14
Redis键 14
Redis键模式 15
键分隔符和命名约定 17
手动创建Redis模式 19
解构Redis对象映射器 22
键过期 27
键的注意事项 27
大O符号 28
为自定义代码计算大O符号 30
回顾Redis数据结构的时间复杂度 32
字符串 32
哈希 33
列表 34
集合 35
有序集合 36
高级有序集合操作 39
位串和位操作 39
HyperLogLogs 41
总结 42
3 内存管理的建议与技巧 44
配置Redis 44
主从复制 45
32位Redis 45
INFO memory详解 47
键过期 49
LRU键清除策略 54
创建内存高效的Redis数据结构 62
小巧的哈希、列表、集合和有序集合 62
把位、字节和Redis字符串用作随机访问数组 68
优化哈希,高效存储 69
硬件和网络延迟 72
操作系统建议 74
总结 75
4 Redis编程第一部分:Redis核心、客户端和编程语言 76
Redis的内部结构 76
理解redis.h和redis.c 83
Redis序列化协议 93
Redis RDB格式 97
使用Redis和Python创建协程 99
使用Node.js和Redis实现Todo列表应用 103
复制与公共访问 106
总结 106
5 Redis编程第二部分:Lua脚本、管理与DevOps 108
在Redis中使用Lua 108
使用Redis的KEYS和ARGV 117
Redis中的高级Lua脚本 121
MARC21数据提取 121
纸质文具在线商店 123
让JSON-LD、Lua和Redis协同工作 126
Redis Lua调试器 130
Redis的编程与管理 133
主从复制 134
使用MULTI和EXEC实现事务 136
Redis在DevOps中扮演的角色 139
总结 140
6 可伸缩性:Redis集群和Sentinel 142
数据分区的方法 142
范围分区 143
列表分区 145
哈希分区 148
复合分区 149
键哈希标签 150
使用Twemproxy实现Redis集群 151
使用关联数据片段服务器测试Twemproxy 152
Redis集群的背景 158
Redis集群概览 159
使用Redis集群 160
Redis集群实时重新配置及重新分片 165
故障转移 168
在Redis集群中替换或者升级节点 170
使用Redis Sentinel进行监控 171
为区域代码列表分区配置Redis Sentinel 173
总结 176
7 Redis与互补的NoSQL技术 177
NoSQL技术的繁荣 177
Redis作为MongoDB的分析补充 181
Redis作为ElasticSearch的预处理组件 192
在BIBCAT中使用Redis和ElasticSearch 193
ElasticSearch、Logstash和Redis 198
Redis作为Fedora Commons的智能缓存补充 199
总结 205
8 Docker容器与云端部署 206
Linux容器 206
与Redis相关的Docker基础 211
Docker镜像中的层 219
Docker文件系统后端 220
Docker和Redis的问题 227
使用Docker Compose打包应用程序 227
Redis和AWS 232
专门的云托管选项 233
Redis Labs 234
DigitalOcean Redis 234
总结 235
9 任务管理与消息队列 236
Redis的发布/订阅模式概述 236
发布/订阅RESP回复 237
SUBSCRIBE和UNSUBSCRIBE RESP数组 237
PSUBSCRIBE和UNSUBSCRIBE数组 239
使用redis-cli进行发布/订阅 240
Redis发布订阅实战 242
第一个工作站采用Python进行发布订阅 244
第二个工作站采用Node.js进行发布订阅 246
第三个工作站使用Lua客户端进行发布订阅 248
Redis键空间通知 251
使用Redis和Celery进行任务管理 255
GIS和RestMQ 259
使用RestMQ进行任务管理 262
使用Redis技术进行消息通信 264
使用Disque进行消息通信 264
总结 266
10 信息流的测量与管理 267
基于Redis的ETL方案 267
将JSON转换成RESP 273
管理Redis时的安全考虑 279
使用Redis Web仪表板进行运营监测 282
机器学习 283
朴素贝叶斯与工作分类 284
使用Redis实现线性规划 294
总结 299
来源 300
译者序
对不少互联网企业来说,使用LNMP 架构可以快速搭建起一套系统,产品可以迅速迭代并尽早投放市场。但随着访问量的上升,那些使用传统关系型数据库(例如MySQL)的网站开始显现出性能方面的问题。此外,越来越挑剔的用户也要求网站不能仅专注于功能特性,同时也要追求极致的产品体验(即高性能和高可用)。
一方面,架构师会在数据库层面做以下一系列优化。
1.配置主从
例如。为MySQL 服务器配置主从。一台宕机,另一台可以顶上继续服务,以满足高可用的要求。
2.读写分离
配置一主多从。因为一般系统80%的请求都是读取操作,将这些操作分发到从服务器上可以有效地提升网站响应速度。
3.分库分表
随着数据量的增长,单库单表已经难以满足要求。一些诸如TDDL、Cobar、MyCAT等的MySQL 分布式数据库中间件应运而生。
另一方面,架构师也会通过系统化的分析,以安插缓存层的方式缓解数据库的压力。对应用系统来说,缓存都应在设计之初就纳入考虑的范畴,成为系统不可或缺的一部分。我曾供职的一家公司就采用Redis 作为缓存的实现方案。应用程序运行在两个同等的Tomcat容器里。Tomcat 之前则配置了一台Nginx 用于Load Balance。由于用户Session 存储在Redis中(通过Spring 和Shiro 的简单配置即可实现),应用的无状态性使得系统可以很方便地进行水平扩缩。另外,我们的业务要求用户每次浏览某个项目页面时进行访问计数(counting)。
为了避免频繁的数据库读写,我们将每个项目的浏览量的计算和读取交给了Redis。同时,为了避免意外导致的数据丢失,我们开启了Redis 的持久化功能,并启动定时任务,每隔一段时间就将项目浏览次数同步到数据库中。
至于为何选择Redis 而没有选择Memcached,当时考虑的主要原因是Redis 支持更为丰富的数据模型。像上述页面访问量计数的需求,可以直接通过Redis 的命令进行操作,而且利用Redis 的单线程模型,应用程序无须编写同步代码。当然,缓存只是Redis 的其中一个用途。一些典型的场景还包括排行榜、用户访问量统计、集合运算、消息队列等。国内外的一些大型互联网企业(例如京东、新浪、Pinterest 等)都对Redis 有不同程度的部署和应用。希望读者能够在本书中找到自己想要的答案。
每次翻译都带给我不同的体验,并为我的工作和生活带来改变。在此,我要感谢电子工业出版社的编辑张春雨和负责审校的同事,是你们的细心指导保证了本书的翻译质量。
同时,感谢我的父母和我的太太,在你们的陪伴和支持下,我得以专心工作。
由于时间仓促,文中难免有所疏漏,望不吝斧正。
汪佳南
前言
本书旨在从两方面为读者构建Redis 的基础知识。一方面,本书提供了Redis 及其技术背后的深层含义及理论;另一方面,拓展了Redis 日常实用技能。本书书名中的精通(Mastering)二字暗示了精通Redis 是一个持续的过程,而非最终目的地。激动人心的是Redis 持续开放地演进成为了时下强大的数据操作和存储技术。
Redis 背后的设计哲学
在整个项目的生命周期中,Salvatore Sanfilippo 对Redis 的发展方向与功能发表了独到的观点和见解。在2015 年1 月的一篇有关Redis 对比其他数据库的基准测试的博客中,
Sanfilippo 声明“我不想说服开发者们采用Redis。我们只是尽力提供一款合适的产品。如果人们能够使用这款产品完成工作,我们会感到非常开心。这就是我的营销理念。”
Sanfilippo 和他的Redis 核心开发团队遵循着成功的开源管理模型:“仁慈独裁者”(BDL)
模型。该模型中只能有单独一个人作为最终独裁者,来裁决哪些能被提交到Redis 代码库中。BDL 模型的成功已经被诸如Linux 内核开发和Python 编程语言等项目证明过了。作为主要开发者和维护者的Sanfilippo 成功地将BDL 模型复制到了Redis 中。
如果独裁者抛弃项目,或者更糟的是因病或者死亡而导致无法工作时,BDL 模型的失效将是灾难性的。Redis 浮现出来的另一个重大问题是当潜在的贡献者提交Pull Request 时,针对这些提交的行动会被延迟,或者更多时候是被忽略。说句公道话,那些必须经过检查、测试并合并到主代码库上的变更的数量非常巨大,需要激情和专门的看门人。作为Linux内核项目的初创者及当前的BDL,Linus Torvalds 已经看到自己的角色发生了转变,更多是在合并那些由其他开发者贡献的代码,同时相比亲自编写代码,他做的更多的是为Linux提供愿景和领导力。Sanfilippo 在Redis 主要的电子邮件通信上的一篇主题帖中确认了该问题,他给出了以下两大主要理由来继续Redis 当前的BDL 模型:
? 项目开发与未来方向的一致性视角
? 对任何新的或者出现的更改采取问责制
在Sanfilippo 看来,Redis 作为键值数据存储,其易于部署、内存占用少(就Redis 本身来说,而不是指它的数据集!)、安全可靠等特性一直是Redis 在开发者和组织中人气持续上升的关键因素。他的观点确实造成了紧张的关系,特别是当提出Redis 的新功能,例如使哈希中具体子值(sub-values)过期,或者为可选功能提供可加载模块时,这些特性都被拒之门外。Sanfilippo 对于保持Redis 的小巧并专注于使其成为内存数据库的渴望,推动发展,在2011 年的博客中,他用有关Redis 和Redis 开发过程的七条宣言阐明了他的观点,简述如下。
1.用于抽象数据类型的DSL。Redis 是一门领域特定语言(DSL),用于抽象数据结构的表达和使用。这些数据结构不仅包括了操作(Redis 命令),还包括了使用Redis 相关命令存储和操作这些数据结构的内存效率和时间复杂度。
2.内存存储是第一要务。通过将所有数据存储在计算机内存中,跨系统的Redis 的性能更为一致,用于实现这些数据结构的众多算法以更为可预测的方式运行,同时诸如有序集合这样的更为复杂的数据类型在内存数据库中更容易实现。
3.基础数据结构对应基础API。Redis 为基础数据结构实现了一套基础API。这套API由Redis 命令和对应的数据结构组成。它尝试清晰地反映API 从计算机内存中读取和写入的数据结构。Redis 遵循这一设计理念,通过更简单的数据结构操作来组合实现更为复杂的操作。
4.代码如诗。这是所有七条宣言之中最难以渗透的。Sanfilippo 将他的审美偏好融入到代码之中以契合Redis 这一长篇巨著。他认为Redis 的编码风格和方法能够帮助人们书写一段叙述。因此,是否包含第三方代码部分取决于它能否很好地契合Redis 的叙述和Redis的源代码。
5.我们反对复杂。避免代码复杂性。如果要在使用大量代码来实现小型功能与舍弃该功能之间做出选择的话,那么Redis 会选择后者,以舍弃额外的复杂性和向代码库中添加复杂性所带来的开销。
6.两层API。一套是API 的子集,以分布式的方式运行;另一套更大型、功能更为丰富,用来支持多键操作。这种分离设计支持像Redis 主从和Redis 集群操作模式这样重要的功能。
7.我们以优化为乐。通常对于开发者和技术运营者来说,这是一种情感诉求,也是一段非常聪明的声明。调优技术来解决疑难杂症所带来的刺激能够激起快乐的感觉及对Redis未来无限可能的兴奋。
本书涵盖内容
阅读本书时你会发现其贯穿着两大主题,以平行的方式展示了流行时尚的运营和过程的开发/运营二元论,即众所周知的DevOps。为了有助于读者更有针对性地学习章节中包含的内容,每个章节的主题会被归类为软件开发或者系统运营。由于两者之间的边界越来越模糊,对每个趋势中主题的深刻理解能够增强你和你团队的能力,以便快速高效地为项目开发和部署Redi 深入理解Redis 下载 mobi epub pdf txt 电子书 格式
深入理解Redis 下载 mobi pdf epub txt 电子书 格式 2024
深入理解Redis 下载 mobi epub pdf 电子书发货快,书便宜,很好
评分买了好多书,看了几本,还有好多还没来得及看,收获很多,坚持都给看完!电子书看着没纸质书的感觉
评分人丑就要多读书,书里有个金香玉。
评分不错,学到很多东西
评分学习中
评分发货快,书便宜,很好
评分Web开发、运营值得一看
评分不错不错不错不错不错不错
评分回到家大家打扮打扮想不到就觉得几点能到家大家都觉得就觉得
深入理解Redis mobi epub pdf txt 电子书 格式下载 2024