Redis服务器搭建

安装

在命令行执行下面的命令:

$ wget http://download.redis.io/releases/redis-2.8.13.tar.gz
    $ tar xzf redis-2.8.13.tar.gz
    $ cd redis-2.8.13
    $ make

编译完成后,会产生六个文件:

redis-server:这个是redis的服务器

redis-cli:这个是redis的客户端

redis-check-aof:这个是检查AOF文件的工具

redis-check-dump:这个是本地数据检查工具

redis-benchmark:性能基准测试工具,安装完后可以测试一下当前Redis的性能

redis-sentinel:Redis监控工具,集群管理工具

配置文件

Redis的配置文件是:redis.conf 常用配置项为:

`daemonize`: 是否以后台进程运行,默认为no
`pidfile /var/run/redis.pid `: pid文件路径
`port 6379`: 监听端口
`bind 127.0.0.1`:绑定主机ip
`unixsocket /tmp/redis.sock`:sock文件路径
`timeout 300`:超时时间,默认是300s
`loglevel verbose`:日志等级,可选项有debug:大量的信息,开发和测试有用;verbose:很多极其有用的信息,但是不像debug那么乱;notice:在生产环境中你想用的信息;warning:最关键、最重要的信息才打印。 默认是erbose
`logfile stdout`:日志记录方式,默认是stdout
`syslog-enabled no`:日志记录到系统日志中,默认是no
`syslog-ident redis`:指定系统日志标识
`syslog-facility local0`:指定系统日志设备,必须是USER或者 LOCAL0~LOCAL7。 默认是local0
`databases 16`:数据库的数量,默认的数据库是DB 0,你可以使用 SELECT <dbid> 来选择不同的数据库。dbid的范围是0~(你设置的值-1)

`save <seconds> <changes>`:RDB在多长时间内,有多少次更新操作,就将数据同步到数据文件。
`save 900 1`:15min内至少1个key被改变
`save 300 10`:5min内至少有300个key被改变
`save 60 10000`:60s内至少有10000个key被改变
`rdbcompression yes`:存储至本地数据库时是否压缩数据,默认是yes
`dbfilename dump.rdb`:本地数据库文件名,默认是dump.rdb
`dir ./`:本地数据库存放路径,默认是./
`slaveof <masterip> <masterport>`:当本机为从服务时,设置主服务的ip以及端口
`masterauth <master-password>`:主服务的连接密码

**从结点与主结点失去连接、或者正在复制时,从结点对客户端请求的处理方式:**
`slave-serve-stale-data yes`:yes:从结点继续响应客户端的请求,但是数据有可能不准确或者为空 no:除了INFO和SLAVEOF以外,其它的命令都返回“SYNC with master in progress”

`requirepass foobared`:连接密码foobared
`maxclients 128`:最大连接数,默认不限制
`maxmemory <bytes>`:设置最大内存,达到最大内存设置后,redis会先尝试清除已到期或即将到期的key,当此方法处理后,任然到达最大内存设置,将无法再进行写入操作

** 下面是maxmemory的策略 **
`maxmemory-policy volatile-lru `:maxmemory设置策略,默认是volatile-lru
volatile-lru:使用LRU算法,从过期集中移除
allkeys-lru:根据LRU算法移除key
volatile-random:从过期集中随机移动一个
allkeys-random:随机移除一个
volatile-ttl: 根据最近过期时间移除key
noeviction:不移除数据,客户端写操作时返回错误 don't expire at all, just return an error on write operations

`maxmemory-samples 3`

`appendonly no`:是否 在每次更新操作后进行日志记录,如果不开启,可能会在断电时导致一段时间内的数据丢失。因为redis本身同步数据文件是按照上面save条件来进行同步的,所以有的数据会在一段时间内只存在于内存中。默认是no
`appendfilename appendonly.aof`:更新日志文件名,默认是appendonly.aof
redis支持的三种不同的同步方式:
no: don't fsync, just let the OS flush the data when it wants. Faster.  //等待OS进行数据缓存同步到硬盘
always: fsync after every write to the append only log . Slow, Safest.  //每次更新操作后调用fsync()将数据写到磁盘
everysec: fsync only if one second passed since the last fsync. Compromise. //每秒同步一次
`appendfsync everysec` //更新日志条件,默认是everysec
`no-appendfsync-on-rewrite no`

`slowlog-log-slower-than 10000`:设置redis slow log时间,只包括命令执行时间,不包括IO操作时间,比如客户端连接,应答相应时间等等。单位是microseconds(一百万分之一秒),默认是10000.负值表示禁用slow log,0表示记录所有命令。
`slowlog-max-len 1024`:slowlog最大长度1024.这会消耗内存,使用SLOWLOG RESET来回收slowlog内存。

`vm-enabled no`  //是否使用虚拟内存,默认是no。在redis2.4版本,强烈不建议使用virtual memory。
`vm-swap-file /tmp/redis.swap`  //虚拟内存文件路径,默认是/tmp/redis.swap,不可多个redis实例共享虚拟内存文件。
`vm-max-memory 0` //设置最大vm,默认为0,所有的value存在于磁盘中。
`vm-page-size 32`  //设置vm的page大小,默认是32
`vm-pages 134217728`  //设置swap文件中最大memory pages,默认是134217728。swap大小=vm-page-size * vm-pages
`vm-max-threads 4`  //vm同时运行的最大io线程

指定在超过一定的数量或者最大的元素超过某一临界值时,采用一种特殊的哈希算法:

`hash-max-zipmap-entries 512`
`hash-max-zipmap-value 64`
`list-max-ziplist-entries 512`
`list-max-ziplist-value 64`
`set-max-intset-entries 512`
`activerehashing yes`  //是否重置hash表

`include /path/to/other.conf`:引用其他配置文件

设置Linux内核内存分配策略

$ sudo vim /etc/sysctl.conf

vm.overcommit_memory = 1 //指定内核针对内存分配的策略,其值可以是0,1,2

0表示内核将检查是否有足够的可用内存供应用进程使用;如果有足够的可用内存,内存申请允许;否则,内存申请失败,并把错误返回给应用进程。

1表示内核允许分配所有的物理内存,而不管当前的内存状态如何。

2表示内核允许分配超过所有物理内存和交换空间总和的内存

启动

./redis-server redis.conf 如果想在一台服务器上搭建多个实例,可以使用下面的目录结果:

redis
      |-- 根目录下放置文件
      |-- instance-1 实例1的目录
         |-- redis.conf  实例1的配置文件
      |-- instance-2 实例2的目录
         |-- redis.conf  实例2的配置文件
      |-- instance-3 实例3的目录
         |-- redis.conf  实例3的配置文件

启动时可以使用下面的命令:

./redis-server ./instance-1/redis.conf:启动实例1 ./redis-server ./instance-2/redis.conf:启动实例2 ./redis-server ./instance-3/redis.conf:启动实例3

进行基准测试

./redis-benchmark 通过基准测试,可以测试在当前的Redis服务器的性能。我在我的虚拟机上测试的结果是写每秒4万多,读每秒8万多

设置主从结构

在作为副本的Redis服务器的配置文件中增加如下配置: slaveof 192.168.66.41 6379 说明: salveof <主结点的IP> <主结点的端口>

#Jedis客户端使用

获取

Jedis的github地址为: https://github.com/xetorthio/jedis 可以通过下面两种方式来获取Jedis的Jar包

直接下载Jar包

https://github.com/xetorthio/jedis/releases

从Maven仓库中取Jar包

<dependency>
        <groupId>redis.clients</groupId>
        <artifactId>jedis</artifactId>
        <version>2.5.2</version>
        <type>jar</type>
        <scope>compile</scope>
    </dependency>

使用

最简单的使用方式

Jedis jedis = new Jedis("localhost");
jedis.set("foo", "bar");
String value = jedis.get("foo");

当然,这种方式并不好,因为每次使用都要新建立一个连接,而且Jedis并不是线程安全的,在并发访问的情况下容易出奇怪的问题。所以应该使用下面的这种方式:使用池 来做。

JedisPool pool = new JedisPool(new JedisPoolConfig(), "localhost");
    Jedis jedis = pool.getResource();
    try {
        /// 开始使用
        jedis.set("foo", "bar");
        String foobar = jedis.get("foo");
        jedis.zadd("sose", 0, "car"); 
        jedis.zadd("sose", 0, "bike"); 
        Set<String> sose = jedis.zrange("sose", 0, -1);
    } finally {
        /// 使用完后,将连接放回连接池
        if (null != jedis) {
            jedis.close();
        }
    }
    /// 应用退出时,关闭连接池:
    pool.destroy();

这种使用池的方式一般都能满足我们的要求,但是有时候我们使用多台Redis服务器时,我们需要将不同的key放到不同的Redis服务器上面,这时我们可以根据业务的不同来选择不同的Redis服务器。这么做可以一定程度的解决问题,但是还会有另外的问题生产,如:我们不容易确定哪个业务产品的数据有多大。这样会使数据不能平均的分配到多台Redis服务器上面。 这时我们需要使用分片的技术。代码如下:

// 分片信息  
	List<JedisShardInfo> shards = new ArrayList<JedisShardInfo>();
	JedisShardInfo si = new JedisShardInfo("localhost", 6379);
	si.setPassword("foobared");
	shards.add(si);
	si = new JedisShardInfo("localhost", 6380);
	si.setPassword("foobared");
	shards.add(si);

	// 池对象  
	ShardedJedisPool pool = new ShardedJedisPool(new Config(), shards);

	// 开始使用  
	ShardedJedis jedis = pool.getResource();
	jedis.set("a", "foo");
	.... // do your work here
	pool.returnResource(jedis);

	.... // a few moments later
	ShardedJedis jedis2 = pool.getResource();
	jedis.set("z", "bar");
	pool.returnResource(jedis);
	pool.destroy();

集群

Set<HostAndPort> jedisClusterNodes = new HashSet<HostAndPort>();
    //Jedis Cluster will attempt to discover cluster nodes automatically
    jedisClusterNodes.add(new HostAndPort("127.0.0.1", 7379));
    JedisCluster jc = new JedisCluster(jedisClusterNodes);
    jc.set("foo", "bar");
    String value = jc.get("foo");