经验首页 前端设计 程序设计 Java相关 移动开发 数据库/运维 软件/图像 大数据/云计算 其他经验
当前位置：技术经验 » 数据库/运维 » Redis » 查看文章
Redis自动化安装以及集群实现
来源：cnblogs　　作者：MSSQL123　　时间：2019/9/19 9:07:38　　对本文有异议
Redis实例安装
安装说明：自动解压缩安装包，按照指定路径编译安装，复制配置文件模板到Redis实例路的数据径下，根据端口号修改配置文件模板
配置文件，当前shell脚本，安装包
参数1：basedir,redis安装包路径
参数2：安装实例路径
参数3：安装包名称
参数4：安装实例的端口号
  1. #!/bin/bash
  2. set -e
  3. if [ $# -lt 4 ]; then
  4.         echo "$(basename $0): Missing script argument"
  5.         echo "$(installdir $0) [installfilename] [port] "
  6.         exit 9
  7. fi
  8. PotInUse=`netstat -anp |  awk '{print $4}'  | grep $4 | wc -l`
  9. if [ $PotInUse -gt 0 ];then
  10.   echo "ERROR" $4 "Port is used by another process!"
  11.   exit 9
  12. fi
  13. basedir=$1
  14. installdir=$2
  15. installfilename=$3
  16. port=$4
  17. cd $basedir
  18. tar -zxvf $installfilename.tar.gz  >/dev/null 2>&1 &
  19. cd $installfilename
  20. mkdir -p $installdir
  21. make PREFIX=$installdir install
  22. sleep 1s 
  23. cp $basedir/redis.conf $installdir
  25. sed -i "s/instance_port/$port/g"  $installdir/redis.conf
  26. sleep 1s 
  27. cd $installdir
  28. ./bin/redis-server redis.conf >/dev/null 2>&1 &

配置文件模板

  1. ################################## INCLUDES ###################################
  2. # include /path/to/local.conf
  3. # include /path/to/other.conf
  5. ################################## MODULES #####################################
  6. # loadmodule /path/to/my_module.so
  7. # loadmodule /path/to/other_module.so
  9. ################################## NETWORK #####################################
  10. bind 127.0.0.1 & your ip
  11. port instance_port
  12. tcp-backlog 511
  13. timeout 0
  14. tcp-keepalive 300
  16. ################################# GENERAL #####################################
  17. daemonize yes
  18. supervised no
  19. pidfile ./redis_instance_port.pid
  20. loglevel notice
  21. logfile ./redis_log.log
  22. databases 16
  23. always-show-logo yes
  25. ################################ SNAPSHOTTING  ################################
  26. save 900 1
  27. save 300 10
  28. save 60 10000
  30. stop-writes-on-bgsave-error yes
  31. rdbcompression yes
  32. rdbchecksum yes
  33. dbfilename dump.rdb
  34. dir ./
  36. ################################# REPLICATION #################################
  37. # masterauth <master-password>
  38. replica-serve-stale-data yes
  39. replica-read-only yes
  40. repl-diskless-sync no
  41. repl-diskless-sync-delay 5
  42. repl-disable-tcp-nodelay no
  43. replica-priority 100
  45. ################################## SECURITY ###################################
  46. requirepass your_passwrod
  48. ################################### CLIENTS ####################################
  49. # maxclients 10000
  51. ############################## MEMORY MANAGEMENT ################################
  52. # maxmemory <bytes>
  53. # maxmemory-policy noeviction
  54. # maxmemory-samples 5
  55. # replica-ignore-maxmemory yes
  57. ############################# LAZY FREEING ####################################
  58. lazyfree-lazy-eviction no
  59. lazyfree-lazy-expire no
  60. lazyfree-lazy-server-del no
  61. replica-lazy-flush no
  63. ############################## APPEND ONLY MODE ###############################
  64. appendonly no
  66. appendfilename "appendonly.aof"
  68. # appendfsync always
  69. appendfsync everysec
  70. # appendfsync no
  72. no-appendfsync-on-rewrite no
  73. auto-aof-rewrite-percentage 100
  74. auto-aof-rewrite-min-size 64mb
  75. aof-load-truncated yes
  76. aof-use-rdb-preamble yes
  78. ################################ LUA SCRIPTING  ###############################
  79. lua-time-limit 5000
  81. ################################ REDIS CLUSTER  ###############################
  82. cluster-enabled yes
  83. # cluster-replica-validity-factor 10
  84. # cluster-require-full-coverage yes
  85. # cluster-replica-no-failover no
  88. ########################## CLUSTER DOCKER/NAT support  ########################
  91. ################################## SLOW LOG ###################################
  92. slowlog-log-slower-than 10000
  93. slowlog-max-len 128
  95. ################################ LATENCY MONITOR ##############################
  96. latency-monitor-threshold 0
  98. ############################# EVENT NOTIFICATION ##############################
  99. notify-keyspace-events ""
  101. ############################### ADVANCED CONFIG ###############################
  102. hash-max-ziplist-entries 512
  103. hash-max-ziplist-value 64
  104. list-max-ziplist-size -2
  105. list-compress-depth 0
  106. set-max-intset-entries 512
  107. zset-max-ziplist-entries 128
  108. zset-max-ziplist-value 64
  109. hll-sparse-max-bytes 3000
  110. stream-node-max-bytes 4096
  111. stream-node-max-entries 100
  112. activerehashing yes
  113. client-output-buffer-limit normal 0 0 0
  114. client-output-buffer-limit replica 256mb 64mb 60
  115. client-output-buffer-limit pubsub 32mb 8mb 60
  116. # client-query-buffer-limit 1gb
  117. # proto-max-bulk-len 512mb
  118. hz 10
  119. dynamic-hz yes
  120. aof-rewrite-incremental-fsync yes
  121. rdb-save-incremental-fsync yes
  124. ########################### ACTIVE DEFRAGMENTATION #######################
  126. # Enabled active defragmentation
  127. # activedefrag yes
  128. # Minimum amount of fragmentation waste to start active defrag
  129. # active-defrag-ignore-bytes 100mb
  130. # Minimum percentage of fragmentation to start active defrag
  131. # active-defrag-threshold-lower 10
  132. # Maximum percentage of fragmentation at which we use maximum effort
  133. # active-defrag-threshold-upper 100
  134. # Minimal effort for defrag in CPU percentage
  135. # active-defrag-cycle-min 5
  136. # Maximal effort for defrag in CPU percentage
  137. # active-defrag-cycle-max 75
  138. # Maximum number of set/hash/zset/list fields that will be processed from
  139. # the main dictionary scan
  140. # active-defrag-max-scan-fields 1000
View Code

安装示例
sh redis_install.sh /usr/local/redis/   /usr/local/redis5/redis9008/  redis-5.0.4  9008

Redi实例的目录结构

 

基于Python的Redis自动化集群实现

基于Python的自动化集群实现，初始化节点为node_1~node_6，节点实例需要为集群模式，三主三从，自动化集群，分配slots，加入从节点，3秒钟左右完成

  1. import redis
  3. #master
  4. node_1 = {'host': '127.0.0.1', 'port': 9001, 'password': '***'}
  5. node_2 = {'host': '127.0.0.1', 'port': 9002, 'password': '***'}
  6. node_3 = {'host': '127.0.0.1', 'port': 9003, 'password': '***'}
  7. #slave
  8. node_4 = {'host': '127.0.0.1', 'port': 9004, 'password': '***'}
  9. node_5 = {'host': '127.0.0.1', 'port': 9005, 'password': '***'}
  10. node_6 = {'host': '127.0.0.1', 'port': 9006, 'password': '***'}
  12. redis_conn_1 = redis.StrictRedis(host=node_1["host"], port=node_1["port"], password=node_1["password"])
  13. redis_conn_2 = redis.StrictRedis(host=node_2["host"], port=node_2["port"], password=node_2["password"])
  14. redis_conn_3 = redis.StrictRedis(host=node_3["host"], port=node_3["port"], password=node_3["password"])
  16. # cluster meet
  17. redis_conn_1.execute_command("cluster meet {0} {1}".format(node_2["host"],node_2["port"]))
  18. redis_conn_1.execute_command("cluster meet {0} {1}".format(node_3["host"],node_3["port"]))
  19. print('#################flush slots #################')
  20. redis_conn_1.execute_command('cluster flushslots')
  21. redis_conn_2.execute_command('cluster flushslots')
  22. redis_conn_3.execute_command('cluster flushslots')
  23. print('#################add slots#################')
  24. for i in range(0,16383+1):
  25.     if i <= 5461:
  26.         try:
  27.             redis_conn_1.execute_command('cluster addslots {0}'.format(i))
  28.         except:
  29.             print('cluster addslots {0}'.format(i) +' error')
  30.     elif 5461 < i and i <= 10922:
  31.         try:
  32.             redis_conn_2.execute_command('cluster addslots {0}'.format(i))
  33.         except:
  34.             print('cluster addslots {0}'.format(i) + ' error')
  35.     elif 10922 < i:
  36.         try:
  37.             redis_conn_3.execute_command('cluster addslots {0}'.format(i))
  38.         except:
  39.             print('cluster addslots {0}'.format(i) + ' error')
  40. print()
  41. print('#################cluster status#################')
  42. print()
  43. print('##################'+str(node_1["host"])+':'+str(node_1["port"])+'##################')
  44. print(str(redis_conn_1.execute_command('cluster info'), encoding = "utf-8").split("\n")[0])
  45. print('##################'+str(node_2["host"])+':'+str(node_2["port"])+'##################')
  46. print(str(redis_conn_1.execute_command('cluster info'), encoding = "utf-8").split("\n")[0])
  47. print('##################'+str(node_3["host"])+':'+str(node_3["port"])+'##################')
  48. print(str(redis_conn_1.execute_command('cluster info'), encoding = "utf-8").split("\n")[0])
  50. #slave cluster meet
  51. redis_conn_1.execute_command("cluster meet {0} {1}".format(node_4["host"],node_4["port"]))
  52. redis_conn_2.execute_command("cluster meet {0} {1}".format(node_5["host"],node_5["port"]))
  53. redis_conn_3.execute_command("cluster meet {0} {1}".format(node_6["host"],node_6["port"]))
  56. #cluster nodes
  57. print(str(redis_conn_1.execute_command('cluster nodes'), encoding = "utf-8"))

示例

这样一个Redis的集群，从实例的安装到集群的安装，环境依赖本身没有问题的话，基本上1分钟之内可以完成这个搭建过程。

 

原文链接：http://www.cnblogs.com/wy123/p/11543882.html

 友情链接：直通硅谷 　点职佳 　北美留学生论坛

Redis热门文章

  • Redis-复制
  • Redis
  • 关于SpringBoot整合redis使用Lettuce客户端超时问题
  • RedisTemplate常用方法封装
  • RedisTemplate中opsForValue和opsForList方法的使用详解
  • Redis7.0部署集群的实现步骤
  • Java&nbsp;Redis&nbsp;Redisson配置教程详解
  • Go语言开发redis封装及简单使用详解
  • SpringBoot Redis批量存取数据的操作
  • .NetCore下基于FreeRedis实现的Redis6.0客户端缓存之缓存键条件优雅过滤

    • Redis推荐文章

  • Redis系列：使用Stream实现消息队列 （图文总结+Go案例） - Hello-Brand
  • 记一次 redis 事件注册不当导致的内存泄露
  • Java Redis多限流
  • 【Azure Developer】一个复制Redis Key到另一个Redis服务的工具(redis_copy_net8)
  • Redis 高阶应用
  • 【长文】带你搞明白Redis
  • StackExchange.Redis跑起来，为什么这么溜？
  • 【进阶篇】基于 Redis 实现分布式锁的全过程
  • Higress 基于自定义插件访问 Redis
  • 美团二面：如何保证Redis与Mysql双写一致性？连续两个面试问到了！

    • 本站QQ群：前端 618073944 | Java 606181507 | Python 626812652 | C/C++ 612253063 | 微信 634508462 | 苹果 692586424 | C#/.net 182808419 | PHP 305140648 | 运维 608723728

    W3xue 的所有内容仅供测试，对任何法律问题及风险不承担任何责任。通过使用本站内容随之而来的风险与本站无关。
    关于我们  |  意见建议  |  捐助我们  |  报错有奖  |  广告合作、友情链接（目前9元/月）请联系QQ：27243702 沸活量
    皖ICP备17017327号-2　皖公网安备34020702000426号