作者简介
付磊,搜狐视频高级研发工程师,CacheCloud项目联合创始人。拥有多年Redis开发运维经验,为公司多个核心业务提供Redis服务,同时热衷于技术传播和分享,撰写了大量关于Redis开发运维的技术文章。
张益军 搜狐视频资深研发工程师,CacheCloud项目联合创始人,曾就职于美团、阿里巴巴等公司。搜狐视频投放组负责人,目前从事投放平台、反作弊等系统的架构设计和优化工作。研究兴趣包括海量峰值访问、分布式存储等。
目录
序言
前言
致谢
第1章初识Redis1
1.1盛赞Redis1
1.2Redis特性2
1.3Redis使用场景5
1.3.1Redis可以做什么5
1.3.2Redis不可以做什么5
1.4用好Redis的建议6
1.5正确安装并启动Redis6
1.5.1安装Redis7
1.5.2配置、启动、操作、关闭Redis8
1.6Redis重大版本11
1.7本章重点回顾14
第2章API的理解和使用15
2.1预备15
2.1.1全局命令15
2.1.2数据结构和内部编码18
2.1.3单线程架构19
2.2字符串21
2.2.1命令22
2.2.2内部编码27
2.2.3典型使用场景28
2.3哈希31
2.3.1命令32
2.3.2内部编码35
2.3.3使用场景36
2.4列表38
2.4.1命令38
2.4.2内部编码43
2.4.3使用场景44
2.5集合46
2.5.1命令46
2.5.2内部编码50
2.5.3使用场景51
2.6有序集合52
2.6.1命令53
2.6.2内部编码59
2.6.3使用场景59
2.7键管理60
2.7.1单个键管理60
2.7.2遍历键67
2.7.3数据库管理70
2.8本章重点回顾73
第3章小功能大用处74
3.1慢查询分析74
3.1.1慢查询的两个配置参数75
3.1.2最佳实践77
3.2RedisShell78
3.2.1redis-cli详解78
3.2.2redis-server详解82
3.2.3redis-benchmark详解83
3.3Pipeline84
3.3.1Pipeline概念84
3.3.2性能测试85
3.3.3原生批量命令与Pipeline对比86
3.3.4最佳实践87
3.4事务与Lua87
3.4.1事务87
3.4.2Lua用法简述90
3.4.3Redis与Lua92
3.4.4案例94
3.4.5Redis如何管理Lua脚本96
3.5Bitmaps98
3.5.1数据结构模型98
3.5.2命令98
3.5.3Bitmaps分析101
3.6HyperLogLog102
3.7发布订阅105
3.7.1命令106
3.7.2使用场景108
3.8GEO109
3.9本章重点回顾112
第4章客户端113
4.1客户端通信协议113
4.2Java客户端Jedis117
4.2.1获取Jedis117
4.2.2Jedis的基本使用方法118
4.2.3Jedis连接池的使用方法122
4.2.4Redis中Pipeline的使用方法125
4.2.5Jedis的Lua脚本126
4.3Python客户端redis-py128
4.3.1获取redis-py128
4.3.2redis-py的基本使用方法128
4.3.3redis-py中Pipeline的使用方法130
4.3.4redis-py中的Lua脚本使用方法130
4.4客户端管理131
4.4.1客户端API132
4.4.2客户端相关配置145
4.4.3客户端统计片段145
4.5客户端常见异常146
4.6客户端案例分析149
4.6.1Redis内存陡增149
4.6.2客户端周期性的超时151
4.7本章重点回顾153
第5章持久化154
5.1RDB154
5.1.1触发机制154
5.1.2流程说明155
5.1.3RDB文件的处理156
5.1.4RDB的优缺点156
5.2AOF157
5.2.1使用AOF157
5.2.2命令写入157
5.2.3文件同步158
5.2.4重写机制159
5.2.5重启加载161
5.2.6文件校验162
5.3问题定位与优化162
5.3.1fork操作162
5.3.2子进程开销监控和优化163
5.3.3AOF追加阻塞165
5.4多实例部署166
5.5本章重点回顾167
第6章复制168
6.1配置168
6.1.1建立复制168
6.1.2断开复制170
6.1.3安全性170
6.1.4只读170
6.1.5传输延迟171
6.2拓扑171
6.3原理172
6.3.1复制过程172
6.3.2数据同步175
6.3.3全量复制178
6.3.4部分复制181
6.3.5心跳183
6.3.6异步复制184
6.4开发与运维中的问题184
6.4.1读写分离184
6.4.2主从配置不一致186
6.4.3规避全量复制186
6.4.4规避复制风暴187
6.5本章重点回顾188
第7章Redis的噩梦:阻塞189
7.1发现阻塞189
7.2内在原因191
7.2.1API或数据结构使用不合理191
7.2.2CPU饱和193
7.2.3持久化阻塞194
7.3外在原因195
7.3.1CPU竞争195
7.3.2内存交换195
7.3.3网络问题196
7.4本章重点回顾199
第8章理解内存200
8.1内存消耗200
8.1.1内存使用统计200
8.1.2内存消耗划分201
8.1.3子进程内存消耗203
8.2内存管理204
8.2.1设置内存上限204
8.2.2动态调整内存上限204
8.2.3内存回收策略205
8.3内存优化209
8.3.1redisObject对象209
8.3.2缩减键值对象210
8.3.3共享对象池211
8.3.4字符串优化213
8.3.5编码优化216
8.3.6控制键的数量223
8.4本章重点回顾225
第9章哨兵226
9.1基本概念226
9.1.1主从复制的问题227
9.1.2高可用227
9.1.3RedisSentinel的高可用性229
9.2安装和部署232
9.2.1部署拓扑结构232
9.2.2部署Redis数据节点233
9.2.3部署Sentinel节点234
9.2.4配置优化236
9.2.5部署技巧243
9.3API244
9.4客户端连接249
9.4.1RedisSentinel的客户端249
9.4.2RedisSentinel客户端基本实现原理249
9.4.3Java操作RedisSentinel251
9.5实现原理254
9.5.1三个定时监控任务254
9.5.2主观下线和客观下线256
9.5.3领导者Sentinel节点选举258
9.5.4故障转移261
9.6开发与运维中的问题262
9.6.1故障转移日志分析262
9.6.2节点运维268
9.6.3高可用读写分离271
9.7本章重点回顾272
第10章集群274
10.1数据分布274
10.1.1数据分布理论274
10.1.2Redis数据分区277
10.1.3集群功能限制278
10.2搭建集群278
10.2.1准备节点278
10.2.2节点握手280
10.2.3分配槽282
10.2.4用redis-trib.rb搭建集群284
10.3节点通信287
10.3.1通信流程287
10.3.2Gossip消息287
10.3.3节点选择290
10.4集群伸缩291
10.4.1伸缩原理291
10.4.2扩容集群293
10.4.3收缩集群301
10.5请求路由305
10.5.1请求重定向305
10.5.2Smart客户端309
10.5.3ASK重定向318
10.6故障转移323
10.6.1故障发现323
10.6.2故障恢复329
10.6.3故障转移时间334
10.6.4故障转移演练334
10.7集群运维336
10.7.1集群完整性336
10.7.2带宽消耗337
10.7.3Pub/Sub广播问题337
10.7.4集群倾斜338
10.7.5集群读写分离339
10.7.6手动故障转移341
10.7.7数据迁移344
10.8本章重点回顾344
第11章缓存设计346
11.1缓存的收益和成本346
11.2缓存更新策略347
11.3缓存粒度控制349
11.4穿透优化350
11.5无底洞优化352
11.6雪崩优化359
11.7热点key重建优化360
11.8本章重点回顾364
第12章开发运维的“陷阱”365
12.1Linux配置优化365
12.1.1内存分配控制365
12.1.2swappiness367
12.1.3THP369
12.1.4OOMkiller370
12.1.5使用NTP371
12.1.6ulimit371
12.1.7TCPbacklog372
12.2flushall/flushdb误操作372
12.2.1缓存与存储373
12.2.2借助AOF机制恢复373
12.2.3RDB有什么变化374
12.2.4从节点有什么变化374
12.2.5快速恢复数据374
12.3安全的Redis375
12.3.1Redis密码机制377
12.3.2伪装危险命令378
12.3.3防火墙380
12.3.4bind380
12.3.5定期备份数据381
12.3.6不使用默认端口381
12.3.7使用非root用户启动381
12.4处理bigkey382
12.4.1bigkey的危害382
12.4.2如何发现382
12.4.3如何删除383
12.4.4最佳实践思路386
12.5寻找热点key386
12.6本章重点回顾391
第13章Redis监控运维云平台CacheCloud392
13.1CacheCloud是什么392
13.1.1现有问题393
13.1.2CacheCloud基本功能393
13.2快速部署395
13.2.1CacheCloud环境需求395
13.2.2CacheCloud快速开始395
13.3机器部署397
13.3.1部署脚本398
13.3.2添加机器399
13.4接入应用400
13.4.1总体流程401
13.4.2账户申请和审批401
13.4.3应用申请和审批402
13.4.4客户端接入405
13.5用户功能407
13.5.1应用统计信息408
13.5.2实例列表409
13.5.3应用详情409
13.5.4命令曲线409
13.5.5CacheCloudRedisShell控制台410
13.5.6慢查询410
13.5.7应用拓扑411
13.6运维功能413
13.6.1应用运维413
13.6.2接入已存在的Redis节点415
13.6.3Redis配置模板416
13.6.4迁移工具417
13.6.5监控报警420
13.6.6系统配置管理422
13.7客户端上报423
13.7.1客户端上报整体设计424
13.7.2Jedis核心代码修改424
13.7.3带上报功能的客户端426
13.7.4CacheCloud客户端统计427
13.8本章重点回顾429
第14章Redis配置统计字典430
14.1info系统状态说明430
14.1.1命令说明430
14.1.2详细说明431
14.2standalone配置说明和分析436
14.2.1总体配置436
14.2.2最大内存及策略437
14.2.3AOF相关配置437
14.2.4RDB相关配置438
14.2.5慢查询配置438
14.2.6数据结构优化配置439
14.2.7复制相关配置439
14.2.8客户端相关配置440
14.2.9安全相关配置440
14.3Sentinel配置说明和分析440
14.4Cluster配置说明和分析441
内容摘要
本书主要讲解Redis基本功能及其应用,以及线上开发与运维监控中的实际使用案例,包含大规模集群开发与管理的场景、应用案例与开发技巧,并总结了实际开发中遇到的“坑”。本书不要求读者有任何Redis使用经验,对入门与进阶DevOps的开发者提供有价值的帮助。主要内容包括:Redis的安装配置、API、客户端、持久化、复制、高可用、集群、缓存设计等基本功能,Redis高可用集群解决方案,Redis设计和使用的问题,开发运维中的陷阱,CacheCloud私有云的开发案例等。
主编推荐
本书作者来自一线开发团队,深入分析并总结了实际工作中遇到的“陷阱”,以及背后的原因, 包含大规模集群开发与管理的场景、案例、技巧,为高效开发运维提供了大量实际经验和建议。本书不要求读者有任何Redis使用经验,对入门与进阶DevOps的开发者提供有价值的帮助。
以下为对购买帮助不大的评价