Redis安装与调试

标签: redis 调试 | 发表时间:2014-11-01 01:38 | 作者:21aspnet
出处:http://blog.csdn.net


Redis安装与调试

Redis安装与调试linux版本:64位CentOS 6.5

Redis版本:2.8.17  (更新到2014年10月31日)

Redis官网: http://redis.io/

Redis常用命令: http://redis.io/commands

1.安装Redis

# wget http://download.redis.io/releases/redis-2.8.17.tar.gz

# tar xzf redis-2.8.17.tar.gz

# cd redis-2.8.17

# make

# make install


如果报错

zmalloc.h:50:31: error: jemalloc/jemalloc.h: No such file or directory
zmalloc.h:55:2: error: #error "Newer version of jemalloc required"
make[1]: *** [adlist.o] Error 1
make[1]: Leaving directory `/data0/src/redis-2.6.2/src'
make: *** [all] Error 2

解决办法是:

make MALLOC=libc


注意:Redis并没有自己实现内存池,没有在标准的系统内存分配器上再加上自己的东西。

redis-2.4以上自带jemalloc,你不需要加任何参数,通过zmalloc.c源码中我们可以看到,Redis在编译时,会先判断是否使用tcmalloc,如果是,会用tcmalloc对应的函数替换掉标准的libc中的函数实现。其次会判断jemalloc是否使得,最后如果都没有使用才会用标准的libc中的内存管理函数。所以用tcmalloc优化请谨慎使用,这两着分配器碎片率相差不大,建议用自带jemalloc。


如果要安装tcmalloc可以这样:

# make USE_TCMALLOC=yes

参考: 利用TCMalloc替换Nginx和Redis默认glibc库的malloc内存分配


为了调试需要修改CFLAGS参数

# make CFLAGS="-g -O0" 

make命令执行完成后,会在src目录下生成5个可执行文件,分别是redis-server、redis-cli、redis-benchmark、redis-check-aof、redis-check-dump,它们的作用如下:
redis-server:Redis服务器的daemon启动程序
redis-cli:Redis命令行操作工具。当然,你也可以用telnet根据其纯文本协议来操作
redis-benchmark:Redis性能测试工具,测试Redis在你的系统及你的配置下的读写性能
redis-check-aof:更新日志检查 

redis-check-dump:用于本地数据库检查 

为什么没用标准的Linux安装三板斧呢?官方维基是这样说的:Redis can run just fine without a configuration file (when executed without a config file a standard configuration is used). With the default configuration Redis will log to the standard output so you can check what happens. Later, you can change the default settings.

也可以make install,这样就是把可运行文件复制到/usr/local/bin里而已。

make之后,会出现一句提示:

Hint: To run 'make test' is a good idea ;)


-----------------------------------------------------------------

其实不测试,一般都可以用。但是既然人家建议了,咱们就走一下make test吧。

运行#make test

报错,提示没有You need 'tclsh8.5' in order to run the Redis test

然后到Tcl的官方网站 http://www.tcl.tk/下载8.5版本

然后安装tcl8.5:

(configure和make的位置比较特殊,在安装目录的unix下,所以下面是tcl官方安装法)

#tar xvzf tcl8.5.12-src.tar.gz

#cd tcl8.5.13/unix/

#./configure

#make

#make test

#make install

注:当然,也可以简单一点,用 yum install tcl 来安装。

好了,安装好tcl之后,可以去redis目录下运行make test了,这次正常跑通。提示:

\o/ All tests passed without errors!
Cleanup: may take some time... OK

说明redis安装正常。可以运行。

-----------------------------------------------------------------

安装

# make install



2.运行Redis

2.8.17版本,redis-server被放到了src文件夹下。

启动Redis服务端

# /usr/redis-2.8.17/src/redis-server

如果没有更改daemonize no配置,会看见运行的信息。


注释:

▲redis的默认端口号是6379,(据redis的作者antirez的博文说,6379在是手机按键上MERZ对应的号码,而MERZ取自意大利歌女Alessia Merz的名字。而MERZ长期以来被antirez及其朋友当作愚蠢的代名词。)

▲Redis有两种存储方式,默认是snapshot方式,实现方法是定时将内存的快照(snapshot)持久化到硬盘,这种方法缺点是持久化之后如果出现crash则会丢失一段数据。因此在完美主义者的推动下作者增加了aof方式。aof即append only mode,在写入内存数据的同时将操作命令保存到日志文件。

 

以后台形式运行Redis

需要读取配置文件方式启动

注意,默认复制过去的 redis.conf文件的 daemonize参数为 no,所以redis不会在后台运行,我们可以修改redis.conf文件,这个文件就是解压后的redis根目录下

daemonize yes

If you want to provide your redis.conf, you have to run it using an additional
parameter (the path of the configuration file):

    % cd src
    % ./redis-server /path/to/redis.conf

# /usr/redis-2.8.17/src/redis-server /usr/redis-2.8.17/redis.conf

查看redis进程

#ps aux |grep redis


启动多个redis实例

拷贝默认的redis.conf改为redis6383.conf,打开redis6383.conf配置文件,找到port 6379这行,把6379改为6383

# /usr/redis-2.8.17/src/redis-server

# /usr/redis-2.8.17/src/redis-server /usr/redis-2.8.17/redis6383.conf


调用服务

# /usr/redis-2.8.17/src/redis-cli

新增

redis> set foo bar

获取

redis> get foo"bar"

删除

redis>del foo



模糊查找

redis>keys f*

redis>keys f?o?


查看info信息

输入# info命令,可以看出 内存碎片率:mem_fragmentation_ratio=2.59

默认使用的是jemalloc内存分配器



3.配置 Redis

redis的配置文件在你的安装目录里。名为:redis.conf。

简单说几点redis.conf:

redis默认不是用 守护进程的,如果需要更改,把daemonize no改成daemonize yes。(测试的时候可以不改,看看打印信息。)

如果对redis默认6379端口不爽的,可以更改port 6379

如果想把 数据文件放到一个指定文件夹,更改dir /opt/data/

默认是dir ./ 也就是默认放到安装目录下。

连接超时时间,timeout 300,没什么改头……

dir 是数据文件路径。默认在安装目录下。

*下面的配置二选一,详见本文注释部分2。

###### SNAPSHOTTING ######内存快照方式:

默认的内存快照策略是,

在900秒(15分钟)内,至少有1次数据变更;

或者300秒内,有至少10次数据变更;

或者60秒内,有至少1000次数据变更;时间+数据变更次数,共同影响内存快照的出现。

###### APPEND ONLY MODE ###### AOF方式

appendfsync everysec 每秒同步。这里可以注释掉,打开下面的选项appendfsync no

其余的配置,conf里面的注释写的挺清楚,我就不多废话了。大家看着自己配就行了。

 

可以拷贝配置文件到etc

mkdir /etc/redis 

cp redis.conf /etc/redis/redis.conf 

mkdir  /var/lib/redis 

1. redis.conf 配置参数:

#是否作为守护进程运行 

daemonize yes 

#如以后台进程运行,则需指定一个pid,默认为/var/run/redis.pid 

pidfile redis.pid 

#绑定主机IP,默认值为127.0.0.1 

#bind 127.0.0.1 

#Redis默认监听端口 

port 6379 

#客户端闲置多少秒后,断开连接,默认为300(秒) 

timeout 300 

#日志记录等级,有4个可选值,debug,verbose(默认值),notice,warning 

loglevel verbose 

#指定日志输出的文件名,默认值为stdout,也可设为/dev/null屏蔽日志 

logfile stdout 

#可用数据库数,默认值为16,默认数据库为0 

databases 16 

#保存数据到disk的策略 

#当有一条Keys数据被改变是,900秒刷新到disk一次 

save 900 1 

#当有10条Keys数据被改变时,300秒刷新到disk一次 

save 300 10 

#当有1w条keys数据被改变时,60秒刷新到disk一次 

save 60 10000 

#当dump .rdb数据库的时候是否压缩数据对象 

rdbcompression yes 

#本地数据库文件名,默认值为dump.rdb 

dbfilename dump.rdb 

#本地数据库存放路径,默认值为 ./ 

dir /var/lib/redis/ 

########### Replication ##################### 

#Redis的复制配置 

# slaveof <masterip> <masterport> 当本机为从服务时,设置主服务的IP及端口 

# masterauth <master-password> 当本机为从服务时,设置主服务的连接密码 

#连接密码 

# requirepass foobared 

#最大客户端连接数,默认不限制 

# maxclients 128 

#最大内存使用设置,达到最大内存设置后,Redis会先尝试清除已到期或即将到期的Key,当此方法处理后,任到达最大内存设置,将无法再进行写入操作。 

# maxmemory <bytes> 

#是否在每次更新操作后进行日志记录,如果不开启,可能会在断电时导致一段时间内的数据丢失。因为redis本身同步数据文件是按上面save条件来同步的,所以有的数据会在一段时间内只存在于内存中。默认值为no 

appendonly no 

#更新日志文件名,默认值为appendonly.aof 

#appendfilename 

#更新日志条件,共有3个可选值。no表示等操作系统进行数据缓存同步到磁盘,always表示每次更新操作后手动调用fsync()将数据写到磁盘,everysec表示每秒同步一次(默认值)。 

# appendfsync always 

appendfsync everysec 

# appendfsync no 

################ VIRTUAL MEMORY ########### 

#是否开启VM功能,默认值为no 

vm-enabled no 

# vm-enabled yes 

#虚拟内存文件路径,默认值为/tmp/redis.swap,不可多个Redis实例共享 

vm-swap-file /tmp/redis.swap 

#将所有大于vm-max-memory的数据存入虚拟内存,无论vm-max-memory设置多小,所有索引数据都是内存存储的 (Redis的索引数据就是keys),也就是说,当vm-max-memory设置为0的时候,其实是所有value都存在于磁盘。默认值为0。 

vm-max-memory 0 

vm-page-size 32 

vm-pages 134217728 

vm-max-threads 4 

############# ADVANCED CONFIG ############### 

glueoutputbuf yes 

hash-max-zipmap-entries 64 

hash-max-zipmap-value 512 

#是否重置Hash表 

activerehashing yes 

注意:Redis官方文档对VM的使用提出了一些建议: 

  • 当你的key很小而value很大时,使用VM的效果会比较好.因为这样节约的内存比较大. 
  • 当你的key不小时,可以考虑使用一些非常方法将很大的key变成很大的value,比如你可以考虑将key,value组合成一个新的value. 
  • 最好使用linux ext3 等对稀疏文件支持比较好的文件系统保存你的swap文件. 
  • vm-max-threads这个参数,可以设置访问swap文件的线程数,设置最好不要超过机器的核数.如果设置为0,那么所有对swap文件的操作都是串行的.可能会造成比较长时间的延迟,但是对数据完整性有很好的保证.

 

2. 调整系统内核参数

如果内存情况比较紧张的话,需要设定内核参数: 

echo 1 > /proc/sys/vm/overcommit_memory 

这里说一下这个配置的含义:/proc/sys/vm/overcommit_memory
该文件指定了内核针对内存分配的策略,其值可以是0、1、2。
0,表示内核将检查是否有足够的可用内存供应用进程使用;如果有足够的可用内存,内存申请允许;否则,内存申请失败,并把错误返回给应用进程。
1,表示内核允许分配所有的物理内存,而不管当前的内存状态如何。
2,表示内核允许分配超过所有物理内存和交换空间总和的内存
Redis在dump数据的时候,会fork出一个子进程,理论上child进程所占用的内存和parent是一样的,比如parent占用的内存为 8G,这个时候也要同样分配8G的内存给child, 如果内存无法负担,往往会造成redis服务器的down机或者IO负载过高,效率下降。所以这里比较优化的内存分配策略应该设置为 1(表示内核允许分配所有的物理内存,而不管当前的内存状态如何)

 

4.调试debug

注意由于redis默认是启用了内存优化的,所以必须修改编译选项。不然,在gdb内打印变量时提示"<value optimized out>",这多半是因为gcc的优化导致,我们可以加上-O0选项来强制禁用gcc的编译优化。

Compiling Redis without optimizations

By default Redis is compiled with the -O2 switch, this means that compiler        optimizations are enabled. This makes the Redis executable faster, but at the        same time it makes Redis (like any other program) harder to inspect using GDB.

所以要修改Makefile文件,该文件在/src目录下,修改 OPTIMIZATION?=-O2选项即可,修改为O0

OPTIMIZATION?=-O0

 

删掉原来的redis重新修改makefile重新make,启动redis

 

具体调试技巧,查看指针变量

查看redis进程

# ps  aux|grep redis

gdb附加到进程

# gdb -p  进程id

(gdb)r     重新开始不然不会从main函数开始

(gdb)break main                  设置断点

(gdb)list                  查看代码

(gdb)p  变量名       查看变量内容,使用p查看变量,这个时候已经可以查看

 

redis调试技巧

redis会在ae.c的aeMain这个函数处循环处理事件:

// 事件处理器的主循环
void aeMain(aeEventLoop *eventLoop) {

    eventLoop->stop = 0;

    while (!eventLoop->stop) {

        // 如果有需要在事件处理前执行的函数,那么运行它
        if (eventLoop->beforesleep != NULL)
            eventLoop->beforesleep(eventLoop);

        // 开始处理事件
        aeProcessEvents(eventLoop, AE_ALL_EVENTS);
    }
}

# /usr/redis-2.6.14/src/redis-cli

redis> set foo bar

OK

redis> get foo"bar"

aeMain函数会截获来自redis-cli的请求,也只有aeMain函数处理好该请求,redis-cli才会返回 OK,不然就会一直等待


 

5.基准测试

第一先用启动命令启动redis

然后在任意目录使用命令:

# redis-benchmark-h localhost -p 6379 -c 100 -n 100000

模拟100个并发连接,100000个请求,检测host为localhost 端口为6379的redis服务器性能


原文地址: http://blog.csdn.net/unix21/article/details/9526295

------------------------------------------------------------------------

更多参考

配置参考: CentOS下Redis 2.2.14安装配置详解

安装参考: Redis (一) 安装

调试参考: http://redis.io/topics/debugging  利用gdb调试redis-server

benchmark参数: Redis安装部署


另外需要在PHP中使用redis需要安装PHP扩展可以参考:

Redis以及Redis的php扩展安装无错版

phpredis使用方法

redis常用命令参考



作者:21aspnet 发表于2014-10-31 17:38:42 原文链接
阅读:142 评论:0 查看评论

相关 [redis 调试] 推荐:

Redis安装与调试

- - CSDN博客系统运维推荐文章
Redis安装与调试linux版本:64位CentOS 6.5. Redis版本:2.8.17  (更新到2014年10月31日). Redis官网: http://redis.io/. Redis常用命令: http://redis.io/commands. 注意:Redis并没有自己实现内存池,没有在标准的系统内存分配器上再加上自己的东西.

Redis 负载监控——redis-monitor

- - ITeye资讯频道
redis-monitor是一个Web可视化的 redis 监控程序. 使用 Flask 来开发的,代码结构非常简单,适合移植到公司内网使用. redis 服务器信息,包括 redis 版本、上线时间、 os 系统信息等等. 实时的消息处理信息,例如处理 command 数量、连接总数量等. 内存占用、 cpu 消耗实时动态图表.

Redis 起步

- - 博客园_首页
Rdis和JQuery一样是纯粹为应用而产生的,这里记录的是在CentOS 5.7上学习入门文章:. Redis是一个key-value存储系统. 和Memcached类似,但是解决了断电后数据完全丢失的情况,而且她支持更多无化的value类型,除了和string外,还支持lists(链表)、sets(集合)和zsets(有序集合)几种数据类型.

redis 配置

- - 谁主沉浮
# 当配置中需要配置内存大小时,可以使用 1k, 5GB, 4M 等类似的格式,其转换方式如下(不区分大小写). # 内存配置大小写是一样的.比如 1gb 1Gb 1GB 1gB. # daemonize no 默认情况下,redis不是在后台运行的,如果需要在后台运行,把该项的值更改为yes. # 当redis在后台运行的时候,Redis默认会把pid文件放在/var/run/redis.pid,你可以配置到其他地址.

Cassandra代替Redis?

- - Tim[后端技术]
最近用Cassandra的又逐渐多了,除了之前的360案例,在月初的QCon Shanghai 2013 篱笆网也介绍了其使用案例. 而这篇 百万用户时尚分享网站feed系统扩展实践文章则提到了Fashiolista和Instagram从Redis迁移到Cassandra的案例. 考虑到到目前仍然有不少网友在讨论Redis的用法问题,Redis是一个数据库、内存、还是Key value store?以及Redis和memcache在实际场景的抉择问题,因此简单谈下相关区别.

redis 部署

- - CSDN博客云计算推荐文章
一、单机部署 tar xvf redis-2.6.16.tar.gz cd redis-2.6.16 make make PREFIX=/usr/local/redis install  #指定安装目录为/usr/local/redis,默认安装安装到/usr/local/bin. # chkconfig: 2345 80 10       #添加redhat系列操作系统平台,开机启动需求项(运行级别,开机时服务启动顺序、关机时服务关闭顺序) # description:  Starts, stops redis server.

nagios 监控redis

- - C1G军火库
下载check_redis.pl. OK: REDIS 2.6.12 on 192.168.0.130:6379 has 1 databases (db0) with 49801 keys, up 3 days 14 hours - connected_clients is 1, blocked_clients is 0 | connected_clients=1 blocked_clients=0.

转 redis vs memcached

- - 数据库 - ITeye博客
传统MySQL+ Memcached架构遇到的问题.   实际MySQL是适合进行海量数据存储的,通过Memcached将热点数据加载到cache,加速访问,很多公司都曾经使用过这样的架构,但随着业务数据量的不断增加,和访问量的持续增长,我们遇到了很多问题:.   1.MySQL需要不断进行拆库拆表,Memcached也需不断跟着扩容,扩容和维护工作占据大量开发时间.

Redis优化

- - 数据库 - ITeye博客
键名:尽量精简,但是也不能单纯为了节约空间而使用不易理解的键名. 键值:对于键值的数量固定的话可以使用0和1这样的数字来表示,(例如:male/female、right/wrong). 当业务场景不需要数据持久化时,关闭所有的持久化方式可以获得最佳的性能,不过一般都要持久化比较安全,而且是快照和aof同时使用比较安全.

笔记--redis

- - 移动开发 - ITeye博客
接着准备面试内容,今天学习了下redis,继续我的笔记加深印象. 1.为什么要使用redis.  答:主要是 性能和 并发两个方面,另外redis也可以做分布式锁和消息队列等其他功能. 但是如果只是为了分布式锁这些其他功能,完全还有其他中间件(如zookpeer等)代替,并不是非要使用redis.