網站首頁 編程語言 正文
1、創建兩個文件夾redis和sentinel文件夾用于存放docker-compose.yml文件
2、redis下的docker-compose.yml
version: "3"
services:
master:
image: redis:latest
container_name: my_redis_master
command: redis-server --requirepass root # 在連接容器時需要密碼
ports:
- 6379:6379
slave1:
image: redis:latest
depends_on: # 這里目的是需要先啟動master,隨后再啟動slave節點
- master
container_name: my_redis_slave1
command: redis-server --slaveof my_redis_master 6379 --requirepass root --masterauth root # 再容器啟動后,通過這里命令來指定主節點ip地址
ports:
- 6380:6379
slave2:
image: redis:latest
depends_on:
- master
container_name: my_redis_slave2
ports:
- 6381:6379
command: redis-server --slaveof my_redis_master 6379 --requirepass root --masterauth root
networks: # 這里是配置網絡環境,目的是讓容器之間能夠相互連接,如果不配置,哨兵將獲取不到從節點的信息,并且無法轉換master節點
default:
external:
name: redis_net
3、sentinel下的docker-compose.yml文件以及sentinel.conf配置文件
version: '3'
services:
? sentinel1:
? ? image: redis
? ? container_name: redis-sentinel-1
? ? networks:
? ? ? - redis_net
? ? ports:
? ? ? - 26379:26379
? ? command: redis-sentinel /usr/local/etc/redis/sentinel.conf ?# 啟動哨兵,并且指定配置文件
? ? volumes:
? ? ? - ./sentinel1.conf:/usr/local/etc/redis/sentinel.conf
? sentinel2:
? ? image: redis
? ? container_name: redis-sentinel-2
? ? networks:
? ? ? - redis_net
? ? ports:
? ? ? - 26380:26379
? ? command: redis-sentinel /usr/local/etc/redis/sentinel.conf
? ? volumes:
? ? ? - ./sentinel2.conf:/usr/local/etc/redis/sentinel.conf
? sentinel3:
? ? image: redis
? ? container_name: redis-sentinel-3
? ? networks:
? ? ? - redis_net
? ? ports:
? ? ? - 26381:26379
? ? command: redis-sentinel /usr/local/etc/redis/sentinel.conf
? ? volumes:
? ? ? - ./sentinel3.conf:/usr/local/etc/redis/sentinel.conf
networks: ?# 這里指定網絡跟redis在同一個網絡環境下
? redis_net:
? ? external:
? ? ? name: redis_net
sentinel配置文件,將下面的配置文件 cp成三分就行
port 26379
dir /tmp
sentinel monitor mymaster 192.168.16.2 6379 2 ?#指定集群的名字以及集群中master的ip地址,這里是容器地址,如果是用的虛擬機地址我這邊會導致master轉換不了。2就是指哨兵有多少個哨兵認為失效master就失效,保證超過50%就行
sentinel auth-pass mymaster root # 重點:我就是在這里忘了配置master需要密碼登陸 導致一直獲取不到master節點下的從信息
sentinel down-after-milliseconds mymaster 30000 #這里是指定master在失效之后多久就認為失效
sentinel parallel-syncs mymaster 1 # failover進行主備切換時最多可以有多少個slave對新的master進行同步,值越小完成failover的時間就越長,設置為1就是每次只有一個slave處于不能處理命令的狀態
sentinel failover-timeout mymaster 180000?
sentinel deny-scripts-reconfig yes
4、spring boot整合redis哨兵
依賴
<dependency> ? ? ? <groupId>org.springframework.boot</groupId> ? ? ? <artifactId>spring-boot-starter-data-redis</artifactId> ? ? ? <!-- 排除lettuce包,使用jedis代替--> ? ? ? <exclusions> ? ? ? ? <exclusion> ? ? ? ? ? <groupId>io.lettuce</groupId> ? ? ? ? ? <artifactId>lettuce-core</artifactId> ? ? ? ? </exclusion> ? ? ? </exclusions> ? ? </dependency> ? ? <dependency> ? ? ? <groupId>redis.clients</groupId> ? ? ? <artifactId>jedis</artifactId> ? ? ? <version>3.0.1</version> ? ? </dependency>
配置
spring:
redis:
sentinel:
master: mymaster
nodes: 192.168.16.5:26379,192.168.16.6:26380,192.168.16.7:26381 # 這里是連接的docker容器中哨兵的ip
jedis:
pool:
max-idle: 8
min-idle: 0
max-wait: -1
max-active: 8
password: root
如果使用的虛擬機中的docker ip地址 先配置路由表,這樣宿主機才能訪問docker容器中的哨兵
route add -p 容器的網絡地址 mask 子網掩碼 虛擬機ip地址 切記一定要關閉虛擬機的防火墻
配置bean
@Bean
? ? public RedisTemplate<String,Object> redisTemplate(RedisConnectionFactory redisConnectionFactory){
? ? ? ? RedisTemplate<String, Object> redisTemplate = new RedisTemplate<>();
? ? ? ? redisTemplate.setConnectionFactory(redisConnectionFactory);
? ? ? ? Jackson2JsonRedisSerializer jackson2JsonRedisSerializer = new Jackson2JsonRedisSerializer(Object.class);
? ? ? ? ObjectMapper om = new ObjectMapper();
? ? ? ? om.setVisibility(PropertyAccessor.ALL, JsonAutoDetect.Visibility.ANY);
? ? ? ? om.enableDefaultTyping(ObjectMapper.DefaultTyping.NON_FINAL);
? ? ? ? jackson2JsonRedisSerializer.setObjectMapper(om);
? ? ? ? StringRedisSerializer stringRedisSerializer = new StringRedisSerializer();
? ? ? ? // key采用String的序列化方式
? ? ? ? redisTemplate.setKeySerializer(stringRedisSerializer);
? ? ? ? // hash的key也采用String的序列化方式
? ? ? ? redisTemplate.setHashKeySerializer(stringRedisSerializer);
? ? ? ? // value序列化方式采用jackson
? ? ? ? redisTemplate.setValueSerializer(jackson2JsonRedisSerializer);
? ? ? ? // hash的value序列化方式采用jackson
? ? ? ? redisTemplate.setHashValueSerializer(jackson2JsonRedisSerializer);
? ? ? ? redisTemplate.afterPropertiesSet();
? ? ? ? return redisTemplate;
? ? }
5、哨兵工作方式
1、特點:
- 每個哨兵進程會每秒一次向集群中的所有redis發送ping命令
- 如果距離最近的一次ping命令的時間超過了 down-after-milliseconds設置的時間,那么當前哨兵就會將起標記為主觀下線(SDOWN)
- 如果Master被標記為了主觀下線,那么其余的哨兵會以每秒一次的頻率確認Master是否進入了主觀下線狀態
- 如果有足夠的哨兵(配置文件中配置)進程在指定的范圍內確認Master進入主觀下線,則Master就會被改為客觀下線(ODWON)
- 如果沒有的哨兵同意Master主服務器下線,master的客觀下線狀態就會被移除
2、故障轉移(Raft算法):
- 先選擇優先級最高的(slave-priority)
- 復制偏移量大的從節點(數據最新的)
- runid最小的
3、缺點:
- redis較難支持在線擴容,如果集群容量達到上限時在線擴容會變的很復雜
- 每個節點存入的數據都是相同的,容器造成資源的浪費
- 容易導致數據的丟失
- redis配置文件中
- min-slaves-to-write 1
- min-slaves-max-lag 10 表示至少要有1個salve節點與master數據同步超過10秒,就拒絕其它的請求
- 腦裂 (網絡分區變化時,master和slave出現無法通信時,sentinel會選擇新的master,那么此時client一直在向之前的master發送數據,將原master進行恢復成新master的slave時,就會丟失后來發送的數據)
6、Redis-Cluster集群
1、特點:
- 節點連接是使用二進制連接的
- 節點fail是超過半數的節點檢測時才會失效
- 客戶端只需要連接集群中任何一個節點即可
2、工作方式
每個節點上都有slot槽的概念,取值范圍是0-16383,還有一個就是cluster用于集群管理的插件。當存取的key值到達時 redis會根據crc16進行計算,然后把計算的結果對16384取余數,這樣就每個key就會有對應的編號在0-16383之間的哈希槽,通過這個值跳轉到對應的節點中。
redis-cluster引入了主從模式,一個主節點對應多個從節點,當超過半數的從節點ping主節點超時時,就會認為主節點宕機了。
3、缺點:
- 數據通過異步復制,不保證數據的強一致性
- 不支持多數據庫空間,集群模式下只能使用1個數據庫空間 0
7、redis常見問題
1、緩存雪崩
? ? 描述:在同一時間段,緩存集中過期。所有的請求都去查詢數據庫
? ? 解決方案:
? ? ? ? 解鎖或者隊列的方式防止大量線程對數據庫的一次性獨寫
? ? ? ? 協調redis的過期時間,隨機時間
? ? ? ? 做二級緩存,一級緩存為短期,二級緩存為長期
? ? ? ? 依賴隔離組件為后端限流并且降級
2、緩存穿透
? ? 描述:在redis中沒有查詢到并且數據庫中也沒有查詢到,下一次進來還是會到redis中查詢,就沒有查詢的意義了
? ? 解決方案:
? ? ? ? 布隆過濾器
? ? ? ? 將空對象記錄在緩存中
3、緩存擊穿
? ? 描述:查詢的某個key恰好失效,剛好又有大量的并發過來,造成DB壓力
? ? 解決方案:
? ? ? ? 通過加鎖或者隊列防止大量請求透過redis到DB中
? ? ? ? 對于熱點key可以無限調長
? ? ? ? 也可以做二級緩存
4、緩存降級
? ? 描述:訪問量劇增、服務出現問題,非核心的服務影響到核心流程的性能,但是仍需要服務還是可用
5、緩存預熱
? ? 描述:先將數據直接加載到redis中,防止用戶在請求時先查數據庫
? ? 解決方案:
? ? ? ? 定時刷新緩存
6、緩存更新
? ? 描述:維護大量緩存,自定義緩存淘汰的策略
? ? 解決方案:定時清理過期的緩存,先判斷緩存是否過期,如果過期就去數據庫獲取新的數據然后再更新
原文鏈接:https://blog.csdn.net/weixin_43915643/article/details/107713781
相關推薦
- 2022-06-25 iOS自定義滑桿效果_IOS
- 2022-09-16 Go語言實現UDP協議及TCP通訊_Golang
- 2022-05-01 oracle刪除超過N天數據腳本的方法_oracle
- 2022-12-01 Git基礎學習之分支操作的示例詳解_相關技巧
- 2022-07-13 Android Canvas - StaticLayout 繪制多行文字
- 2022-04-20 C語言函數棧幀的創建和銷毀詳解_C 語言
- 2023-01-31 React受控組件與非受控組件深入講解_React
- 2023-03-01 Gorm更新零值問題解決思路與過程_Golang
- 最近更新
-
- window11 系統安裝 yarn
- 超詳細win安裝深度學習環境2025年最新版(
- Linux 中運行的top命令 怎么退出?
- MySQL 中decimal 的用法? 存儲小
- get 、set 、toString 方法的使
- @Resource和 @Autowired注解
- Java基礎操作-- 運算符,流程控制 Flo
- 1. Int 和Integer 的區別,Jav
- spring @retryable不生效的一種
- Spring Security之認證信息的處理
- Spring Security之認證過濾器
- Spring Security概述快速入門
- Spring Security之配置體系
- 【SpringBoot】SpringCache
- Spring Security之基于方法配置權
- redisson分布式鎖中waittime的設
- maven:解決release錯誤:Artif
- restTemplate使用總結
- Spring Security之安全異常處理
- MybatisPlus優雅實現加密?
- Spring ioc容器與Bean的生命周期。
- 【探索SpringCloud】服務發現-Nac
- Spring Security之基于HttpR
- Redis 底層數據結構-簡單動態字符串(SD
- arthas操作spring被代理目標對象命令
- Spring中的單例模式應用詳解
- 聊聊消息隊列,發送消息的4種方式
- bootspring第三方資源配置管理
- GIT同步修改后的遠程分支