Redis集群模式介绍
Cluster模式是Redis3.0开始推出的
Redis Cluster属于AP模型
采用无中心结构，每个节点保存数据和整个集群状态, 每个节点都和其他所有节点连接
官方要求：至少6个节点才可以保证高可用，即3主3从；扩展性强、更好做到高可用
各个节点...
2年前 (2022-10-20) 4414℃
2喜欢
Redis 主从复制
用途
1、Redis 主从是构建redis集群最基础的操作
2、读写分离，扩展主节点的读能力，分担主节点读压力
redis 一主两从搭建
1、Redis 安装（3个节点都要）
yum install -y gcc-c++ autoconf automake...
2年前 (2022-10-20) 2199℃
2喜欢
什么是缓存穿透
首先要做一个小科普，在日常开发中，无论使用进程内缓存(如：ehcache)，还是进程外的缓存中间件（如：redis），他的本质就是利用内存的高吞吐的特性高效的完成数据的提取工作。因为底层mysql 在进行数据提取操作的时候是随机读写，性能比较慢。我们通常把热点数据...
2年前 (2022-10-18) 1691℃
0喜欢
为什么不能直接更新缓存
首先要做一个小科普，在日常开发中，无论使用进程内缓存(如：ehcache)，还是进程外的缓存中间件（如：redis），他的本质就是利用内存的高吞吐的特性高效的完成数据的提取工作。因为底层mysql 在进行数据提取操作的时候是随机读写，性能比较慢。我们通常把...
2年前 (2022-10-18) 5617℃
0喜欢
介绍
自Spring 3.1版本以来，Spring框架支持低侵入的方式向已有Spring应用加入缓存特性。与声明式事务类似，声明式缓存Spring Cache抽象允许一致的API来已支持多种不同的缓存解决方案，同时将对代码的影响减少到最小。
准备工作
0、创建一个Spring b...
2年前 (2022-10-18) 7050℃
1喜欢
介绍
Spring Boot 内置了spring-boot-starter-data-redis这个模块用于简化Spring与Redis的 交互过程。
Spring-data-redis是spring大家族的一部分，提供了在spring应用中通过简单的配置访问 redis服务，对...
2年前 (2022-10-18) 2832℃
0喜欢
Canal局限性
时效性问题
mysql 主从复制存在延迟，不适合对数据同步实时性要求高的场景
注：复制有延迟这个问题mysql自身都解决不了，更不要指望第三方工具解决，这也是为什么很多生产mysql不开启读写分离的原因
canal 高可用问题
canal 挂载主库：mysq...
2年前 (2022-10-18) 1948℃
3喜欢
场景介绍
在大数据业务采集场景中，经常会通过Flume把Kafka中的数据落地到HDFS进行持久保存和数据计算。为了数据计算和运维方便，通常会把每天的数据在HDFS通过天分区独立存储。
在数据落入HDFS 天分区目录的过程中，会出现数据跨天存储的问题，本来是2022年6月16日的...
2年前 (2022-10-18) 1869℃
2喜欢
Flume 内部原理
本文主要使用其中的Interceptor和Channel Selector
Interceptor：
对source中的数据在进入channel之前进行拦截做一些处理，比如过滤掉一些数据，或者加上一些key/value等。flume内置了一些拦截器，也可以...
2年前 (2022-10-18) 1807℃
1喜欢
纠删码介绍
HDFS默认情况下，一个文件有3个副本，这样提高了数据的可靠性，但也带来了2倍的冗余开销。Hadoop3.x引入了纠删码，通过计算生成数据单元+计算单元的存储的方式，可以节省约50％左右的存储空间，这种存储方式同样也可以容忍集群中最多出现两台服务器同时宕机（注意：不同...
2年前 (2022-10-15) 1104℃
0喜欢
