newstyles项目实战(十九)redis概念以及安装,以及集群环境的模拟建立

redis的背景了解:

       Redis是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库,并提供多种语言的API。从2010年3月15日起,Redis的开发工作由VMware主持。(来源于网络)

  其最大的优势在于能够建立缓存,使得其以一种非关系型数据库的方式存在于互联网的工程应用之中,相比较传统的硬盘读写,其能够有较快的响应速度,不过也不是所有的业务都需要使用redis来做缓存,主要从以下三个方面来考虑:

(1)业务数据是不是经常被用到,命中率如何?命中率低的话就没必要做缓存了。

(2)该业务的读取和写入那种操作比较多,如果频繁写入数据库的话,其实redis作用也不是很大。

(3)该业务的数据大小如何,如果存储几百兆的字段,将会给缓存带来很大的压力,考虑是否有必要?更详细的Redis参考则可以参考本人以后再Redis栏目下的博文。

Redis的安装:

本次试验实在Linux环境下安装的,Linux版本为Centos 7.0,安装的Redis版本为3.0版本。选择的版本为edis3.0版本。3.0版本主要增加了redis集群功能。

假如是新安装的Linux系统的话,可能缺少安装时的编译环境需要安装 gcc编译器:

需要安装gcc:yuminstall gcc-c++

1、下载redis的源码包。

2、把源码包上传到linux服务器,可以通过SecurtyCRT的SFtp来进行上传,上传后解压压缩包

扫描二维码关注公众号,回复: 1554252 查看本文章

3、解压源码包(tar -zxvf “”文件名“”)tar -zxvf redis-3.0.0.tar.gz

4、Make 找到解压的文件夹,并进入:


可以看到里面有个Makefile,这个是待执行的编译文件。使用MakeInstall 命令来进行安装

5、Make install  命令为:[root@localhost redis-3.0.0]# make installPREFIX=/usr/local/redis,此命令则告诉安装进程将redis安装到/usr/lcoal/redis文件夹下面。进入上面的文件夹可以看到:



默认的是前端启动,在redis/bin目录中执行命令:./redis-server,则进入了前端启动,这个也可以检验是否安装成功:


可以看到其在默认的端口6379端口监听,所以,此时我们的redis服务就能够成功的启动了。再此界面下如果想退出,则可以使用组合建Ctrl + c来退出,此时,redis服务也相应的停止。


此时,我们如果想通过后端启动的话则可以将redis从redis的源码目录中复制redis.conf到redis的安装目录。然后修改配置文件:


此时,在redis/bin目录下执行:./redis-server redis.conf 命令就可以使用后端方式启动reids。可以通过./redis-cli进入redis客户端。

Redis集群搭建:

redis-cluster把所有的物理节点映射到[0-16383]slot上,cluster 负责维护node<->slot<->value。Redis 集群中内置了 16384 个哈希槽,当需要在 Redis 集群中放置一个 key-value 时,redis 先对 key 使用 crc16 算法算出一个结果,然后把结果对 16384 求余数,这样每个 key 都会对应一个编号在 0-16383 之间的哈希槽,redis 会根据节点数量大致均等的将哈希槽映射到不同的节点。

redis-cluster投票:容错


(1)领着投票过程是集群中所有master参与,如果半数以上master节点与master节点通信超过(cluster-node-timeout),认为当前master节点挂掉.
(2):什么时候整个集群不可用(cluster_state:fail)? 
    a:如果集群任意master挂掉,且当前master没有slave.集群进入fail状态,也可以理解成集群的slot映射[0-16383]不完成时进入fail状态. ps : redis-3.0.0.rc1加入cluster-require-full-coverage参数,默认关闭,打开集群兼容部分失败.
    b:如果集群超过半数以上master挂掉,无论是否有slave集群进入fail状态.

  ps:当集群不可用时,所有对集群的操作做都不可用,收到((error) CLUSTERDOWN The cluster is down)错误。

模拟集群结构建立:

集群中有三个节点的集群,每个节点有一主一备。需要6台虚拟机。搭建一个伪分布式的集群,使用6个redis实例来模拟。这六个实力在同一个虚拟机上。

所需要的环境:

搭建集群需要使用到官方提供的ruby脚本。需要安装ruby的环境。如果没有Ruby的话则需要首先安装Ruby,使得虚拟机有一个Ruby环境:安装ruby
yum install ruby

yum install rubygems 自最b主要的是使用redis-trib.rb来管理集群,所以这里需要我们先有一个Ruby环境。之后上传到Linux服务器Ruby需要的脚本包:


之后安装:[root@localhost ~]# gem install redis-3.0.0.gem 

集群环境搭建:

第一步:创建6个redis实例,端口号从7001~7006。

实际上就是先在/usr/local文件夹下面建立一个redis-cluster文件夹,文件夹里面分别建立六个文件夹,Redis01-06,然后将原来安装的Redis文件夹里面的内容分别复制到这六个文件夹中。

第二步:然后分别修改其对应的运行的端口,并将集群形式的选项设置为yes:修改端口,以redis01为例;


修改集群选项:


第三步:把创建集群的ruby脚本复制到redis-cluster目录下。


此时,可以分别启动这六个实例,这样就可以模拟出运行在六个不同的服务器上的Redis服务了。

第五步:创建集群。

启动命令:./redis-trib.rb create --replicas 1 192.168.25.153:7001 192.168.25.153:7002 192.168.25.153:7003 192.168.25.153:7004 192.168.25.153:7005  192.168.25.153:7006 ;之后在启动集群的时候就不在需要这个命令了,这个命令执行一次就可以了,如果集群不发生变化的情况下。

集群启动成功后出现的输出内容:

>>> Creating cluster
Connecting to node 192.168.25.153:7001: OK
Connecting to node 192.168.25.153:7002: OK
Connecting to node 192.168.25.153:7003: OK
Connecting to node 192.168.25.153:7004: OK
Connecting to node 192.168.25.153:7005: OK
Connecting to node 192.168.25.153:7006: OK
>>> Performing hash slots allocation on 6 nodes...
Using 3 masters:
192.168.25.153:7001
192.168.25.153:7002
192.168.25.153:7003
Adding replica 192.168.25.153:7004 to 192.168.25.153:7001
Adding replica 192.168.25.153:7005 to 192.168.25.153:7002
Adding replica 192.168.25.153:7006 to 192.168.25.153:7003
M: 5a8523db7e12ca600dc82901ced06741b3010076 192.168.25.153:7001
   slots:0-5460 (5461 slots) master
M: bf6f0929044db485dea9b565bb51e0c917d20a53 192.168.25.153:7002
   slots:5461-10922 (5462 slots) master
M: c5e334dc4a53f655cb98fa3c3bdef8a808a693ca 192.168.25.153:7003
   slots:10923-16383 (5461 slots) master
S: 2a61b87b49e5b1c84092918fa2467dd70fec115f 192.168.25.153:7004
   replicates 5a8523db7e12ca600dc82901ced06741b3010076
S: 14848b8c813766387cfd77229bd2d1ffd6ac8d65 192.168.25.153:7005
   replicates bf6f0929044db485dea9b565bb51e0c917d20a53
S: 3192cbe437fe67bbde9062f59d5a77dabcd0d632 192.168.25.153:7006
   replicates c5e334dc4a53f655cb98fa3c3bdef8a808a693ca
Can I set the above configuration? (type 'yes' to accept): yes
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join.....
>>> Performing Cluster Check (using node 192.168.25.153:7001)
M: 5a8523db7e12ca600dc82901ced06741b3010076 192.168.25.153:7001
   slots:0-5460 (5461 slots) master
M: bf6f0929044db485dea9b565bb51e0c917d20a53 192.168.25.153:7002
   slots:5461-10922 (5462 slots) master
M: c5e334dc4a53f655cb98fa3c3bdef8a808a693ca 192.168.25.153:7003
   slots:10923-16383 (5461 slots) master
M: 2a61b87b49e5b1c84092918fa2467dd70fec115f 192.168.25.153:7004
   slots: (0 slots) master
   replicates 5a8523db7e12ca600dc82901ced06741b3010076
M: 14848b8c813766387cfd77229bd2d1ffd6ac8d65 192.168.25.153:7005
   slots: (0 slots) master
   replicates bf6f0929044db485dea9b565bb51e0c917d20a53
M: 3192cbe437fe67bbde9062f59d5a77dabcd0d632 192.168.25.153:7006
   slots: (0 slots) master
   replicates c5e334dc4a53f655cb98fa3c3bdef8a808a693ca
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

其中,ip地址根据自己的主机的地址进行修改,在这里仅仅是一个例子,不一定是就是这个地址对应下的端口。其实可以为第五步和第四步写一个脚本,可以仅通过这个脚本就可以启动redis集群。如启动六个实例的shell脚本(startall.sh)

cd redis01
./redis-server redis.conf
cd ..

cd redis02
./redis-server redis.conf
cd ..
cd redis03
./redis-server redis.conf
cd ..
cd redis04
./redis-server redis.conf
cd ..
cd redis05
./redis-server redis.conf
cd ..
cd redis06
./redis-server redis.conf
cd ..

全部停止的shell脚本(shutdown.sh),其中每一个都为关闭一个实例的执行的命令。

redis01/redis-cli -p 7001 shutdown
redis02/redis-cli -p 7002 shutdown
redis03/redis-cli -p 7003 shutdown
redis04/redis-cli -p 7004 shutdown
redis05/redis-cli -p 7005 shutdown
redis06/redis-cli -p 7006 shutdown

当执行./startall.sh后就会启动这个集群,我们可以查看有关redis的进程,则可以发现,其运行在7001-7006端口,那么这么才能够说明我们建立的集群能够正确运行呢。

首选,我们可以先登录端口7002的客户端:


可以看到我们设置了a的值为10002,通过计算,其被重新分配到7003端口的15495槽口中,如果还原模拟,则相当于在集群服务器中其从一个服务器跳转到了另一台服务器。说明我们建立的集群是可以正确执行的。

Redis客户端:

1.自带的客户端,如上面登录端口7002的客户端。

2.图形化界面的Redis客户端。(单机版)


3.Jedis客户端,为Java代码执行的客户端。

需要把jedis的jar包添加到工程中,如果是maven需要添加jar包的坐标。

之后就可以在建立的工程中使用了:

1.单机版

public class JedisTest {

	@Test
	public void testJedisSingle() {
		//创建一个jedis的对象。
		Jedis jedis = new Jedis("192.168.25.153", 6379);
		//调用jedis对象的方法,方法名称和redis的命令一致。
		jedis.set("key1", "jedis test");
		String string = jedis.get("key1");
		System.out.println(string);
		//关闭jedis。
		jedis.close();
	}
	
	/**
	 * 使用连接池
	 */
	@Test
	public void testJedisPool() {
		//创建jedis连接池
		JedisPool pool = new JedisPool("192.168.25.153", 6379);
		//从连接池中获得Jedis对象
		Jedis jedis = pool.getResource();
		String string = jedis.get("key1");
		System.out.println(string);
		//关闭jedis对象
		jedis.close();
		pool.close();
	}
}

2.集群版:

	public void testJedisCluster() {
		HashSet<HostAndPort> nodes = new HashSet<>();
		nodes.add(new HostAndPort("192.168.25.153", 7001));
		nodes.add(new HostAndPort("192.168.25.153", 7002));
		nodes.add(new HostAndPort("192.168.25.153", 7003));
		nodes.add(new HostAndPort("192.168.25.153", 7004));
		nodes.add(new HostAndPort("192.168.25.153", 7005));
		nodes.add(new HostAndPort("192.168.25.153", 7006));
		
		JedisCluster cluster = new JedisCluster(nodes);
		
		cluster.set("key1", "1000");
		String string = cluster.get("key1");
		System.out.println(string);
		
		cluster.close();
	}

猜你喜欢

转载自blog.csdn.net/qq_18870127/article/details/80633229