Sentinel

作者：李志鹏， Github账号：Lzp0412,开源社区爱好者，Nacos Committer，Nacos-SDK-go作者，现就职于阿里云云原生应用平台，主要参与服务发现、CoreDNS、ServiceMesh相关工作，负责推动Nacos Go微服务生态建设。 近几年，随着Go语言社区逐渐发展和壮大，越来越多的公司开始尝试采用Go搭建微服务体系，也涌现了一批Go的微服务框架，如go-micro、go-kit、Dubbo-go等，跟微服务治理相关的组件也逐渐开始在Go生态发力，如Sentinel、Hystrix等都推出了Go语言版本，而作为微服务框架的核心引擎--注册中心，也是必不可缺少的组件，市面已经有多款注册中心支持Go语言，应该如何选择呢？我们可以对目前主流的支持Go语言的注册中心做个对比。 根据上表的对比我们可以从以下几个维度得出结论： 生态: 各注册中心对Go语言都有支持，但是Nacos、 Consul、Etcd 社区活跃，zookeeper和Eureka社区活跃度较低； 易用性： Nacos、Eureka、Consul都有现成的管控平台，Etcd、zookeeper本身作为kv存储，没有相应的管控平台，Nacos支持中文界面，比较符合国人使用习惯； 场景支持： CP模型主要针对强一致场景，如金融类，AP模型适用于高可用场景，Nacos可以同时满足两种场景，Eureka

本文介绍如何在springboot项目中集成kafka收发message。 1、先解决依赖 springboot相关的依赖我们就不提了，和kafka相关的只依赖一个spring-kafka集成包 <dependency> <groupId>org.springframework.kafka</groupId> <artifactId>spring-kafka</artifactId> <version>1.1.1.RELEASE</version> </dependency> 这里我们先把配置文件展示一下 #============== kafka =================== kafka.consumer.zookeeper.connect=10.93.21.21:2181 kafka.consumer.servers=10.93.21.21:9092 kafka.consumer.enable.auto.commit=true kafka.consumer.session.timeout=6000 kafka.consumer.auto.commit.interval=100 kafka.consumer.auto.offset.reset=latest kafka.consumer.topic=test kafka.consumer.group.id=test

环境准备 三台独立的linux主机 内网IP分别为: 172.31.175.142、172.31.175.143、172.31.175.144 分别创建带主目录的普通用户, 比如useradd wx -m 安装redis 分别在各个主机上安装redis,以172.31.175.142为例,步骤如下 #下载4.0稳定版 wget http://download.redis.io/releases/redis-4.0.11.tar.gz #解压到用户主目录 tar -xzvf redis-4.0.11.tar.gz -C /home/wx #进入用户主目录 cd /home/wx #重命名解压的文件 mv redis-4.0.11 redis #进入redis目录 cd redis #编译 make #安装,PREFIX指定安装路径 make PREFIX=/home/wx/redis install 主从/哨兵配置 一主(master)二从(slave)三哨兵(sentinel)的配置目标, 如下 redis.conf配置主从, sentinel.conf配置哨兵 conf里面很多初始的配置项可以不做修改, 对于需要修改或新增的配置项, 说明如下 通用配置 下面3项,务必在每个redis.conf里进行修改,在每个sentinel.conf里新增(默认没有) #支持内网/本地访问

借鉴：http://redis.majunwei.com/topics/sentinel.html 　　 https://blog.csdn.net/u011784767/article/details/77994046?locationNum=6&fps=1 想了解主从备份原理的请看 Redis实战——redis主从复制和集群实现原理 概述 Redis的哨兵机制是官方推荐的一种高可用（HA）方案，我们在使用Redis的主从结构时，如果主节点挂掉，这时是不能自动进行主备切换和通知客户端主节点下线的。Redis哨兵为Redis提供了高可用性。实际上这意味着你可以使用哨兵模式创建一个可以不用人为干预而应对各种故障的Redis部署。 哨兵模式还提供了其他的附加功能，如监控，通知，为客户端提供配置。 下面是在宏观层面上哨兵模式的功能列表： 监 控 ：哨兵不断的检查master和slave是否正常的运行。 通知 ：当监控的某台Redis实例发生问题时，可以通过API通知系统管理员和其他的应用程序。 自动故障转移 ：如果一个master不正常运行了，哨兵可以启动一个故障转移进程，将一个slave升级成为master，其他的slave被重新配置使用新的master，并且应用程序使用Redis服务端通知的新地址。 配置提供者 ：哨兵作为Redis客户端发现的权威来源

由于国内用户对电商购物的热衷，再加上这些年，商家推出的各种优惠补贴策略和高效快捷的物流，也让大家足不出门享受到了真正的实惠。 但，对于一个 java 程序员 来讲，我更关注的是 系统架构层面 ，从原本的定时秒杀，到现在的各种 活动预热、拼团、定金膨胀、百亿补贴、跨店满减、以及更复杂的组合优惠 ，让用户一时摸不到头脑，虽然扰乱了用户购买的节奏，但也一直保持着持续升温的状态。 那么从 技术层面来分析 的话，这次优惠的复杂程度会造成原本就会有的 集中式秒杀 ，变成了 持续式高并发请求 ，这让我们的技术架构更为复杂，尤其是对 后台系统 而言， 复杂的链路调用 ，更多缓存逻辑和业务叠加给程序员们增加了额外的挑战。 当然像淘宝、京东、拼多多这种体量的用户群，在双十一之前早就做好了应对方案 对于在做 二三线电商 的小伙伴或想要了解淘宝、京东内部架构的小伙伴，我总结了以下几点技术总结： 技术总结： 电商高并发系统架构，SpringCloud Alibaba是如何应对双十一 抗住淘宝双十一的三大利器：Sentinel、Nacos、RocketMQ Sentinel在淘宝双十一洪峰时限流底层实现原理 Alibaba Sentinel对比 Netflix Hystrix区别与优势 Nacos在淘宝中如何抗住百万服务注册发现与配置下发 RocketMQ在双十一秒杀时如何抗住亿级订单数据

特点 <font color="grey">redis是高性能的key-value的数据库，其支持数据的持久化，可以将内存中的数据保存在磁盘中，重启时再次加载使用；具有丰富的数据类型支持，例如list, set, zset, hash等； 支持数据备份，也即master-slave模式的数据备份（注意备份和持久化的区别）。此外redis具备高性能的读写效率，操作具备原子性，意思就是要么执行成功要么失败完全不执行，单个操作是原子性的，多个操作也支持事务（通过MULTI和EXEC包裹起来）但要特别注意的是并非是原子性的，此外还支持发布/订阅，通知，key过期等特性</font> 介绍 <font color="grey">redis是一个字典结构的存储服务器，而实际上一个redis实例提供了多个用来存储数据的字典，客户端可以指定将数据存储在哪个字典中，这与我们熟知的在一个关系数据库中可以创建多个数据库类似，所以可以将其中的每个字典都理解成为一个独立的数据库。每个数据库对外都是一个从0开始的递增的数字命名，redis默认支持16个数据库，可以通过配置databases来修改这一个数字，客户端与redis建立连接后会自动选择0号数据库，不过可以随时用select命令来切换数据库，例如选择1号数据库: select 1。这些以数字命名的数据库和我们平时理解的数据库有所区别

1、Redis简介 Redis是一个开放源代码（BSD许可证）的代理，其在内存中存储数据，可以代理数据库、缓存和消息。它支持字符串、散列、列表、集合和位图等数据结构。Redis 是一个高性能的key-value数据库， 它在很大程度改进了memcached这类key/value存储的不足。Redis提供了Java，C/C++，C#，PHP，JavaScript，Perl，Object-C，Python，Ruby和Erlang等语言的客户端。 Redis支持master/slave结构，数据可以从master向任意数量的slave上进行同步。Redis 与其它 key – value 缓存产品相比，具有以下三个方面特点： 支持内存的持久化：可以将内存中的数据保存在磁盘中，重启的时候可以再次加载进行使用； 支持多种数据结构：Redis不仅仅只是支持key-value类型的数据，还能够支持字符串、散列和列表等数据结构； 支持主从结构：Redis支持主从结构，保证系统的高可用。 2、基于Sentinel模式的高可用方案 本文中的Redis高可用方案采用Sentinel(哨兵)模式，在集群出现故障的时候自动进行故障转移，保证集群的可用性。Redis Sentinel 为Redis提供了高可用性，这意味着通过使用Sentinel 可以创建一个Redis部署

redis的主从、集群、哨兵 参考： https://blog.csdn.net/robertohuang/article/details/70741575 https://blog.csdn.net/robertohuang/article/details/70766809 https://blog.csdn.net/robertohuang/article/details/70768922 https://blog.csdn.net/robertohuang/article/details/70833231 https://blog.csdn.net/u011204847/article/details/51307044 Redis简介及单机版编译安装详细教程 1.Redis简介 Redis(Remote Dictionary Server)是一种Nosql技术,它是一个开源的高级kv数据结构存储系统,它经常拿来和Memcached相比较,但是Memcached不提供持久化的数据保存机制而Redis可以将数据存在磁盘中,Redis不仅仅是能够存储key和value这种简单的键值对,还能存储例如集合、hash表、列表、字典等。Redis在整个运行过程中,数据统统都是存储在内存中的,因此,性能是相当高的,由于此特性,Redis对于内存的要求比较高

“我能熟练使用这个框架/软件/技术就行了， 为什么要看源码？” “平时不用看源码， 看源码太费时间，还容易忘记，工作中出现问题再针对性地阅读，效率更高。” “为了面试才需要看源码！” 。。。。。。 如果你也有类似的疑问，不妨接着往下看 1、为什么要阅读源码？ 1.1 在通用型基础技术中提高技术能力 在 JAVA 领域中包含 JAVA 集合、Java并发(JUC)等， 它们是项目中使用的高频技术，在各种复杂的场景中选用合适的数据结构、线程并发模型，合理控制锁粒度等都能显著提高应用程序的可用性、健壮性，非常容易凸显出自己的技术实力，更容易受到领导的认可，助力职场。 当然通过阅读源码并不是知晓原理的唯一方法，但作为一个名程序员、直面代码，亲自感受代码的魅力或许会显得的更加直接。 1.2 在重点领域打造自己的亮点 我所在公司使用了 Dubbo、RocketMQ，我也有幸参与到这些技术栈的运用与运维，积累了丰富的使用经验，为了突出在这两个领域的优势，我详细阅读了它们的源码，在CSDN和公众号等知识分享平台发布了大量的技术文章，成体系的剖析其实现原理、架构设计理念，理论与实战相结合，让我成为在Dubbo、RocketMQ领域当仁不让的技术专家，团队中的核心骨干。 同时由于文章是成体系的，被出版社相中，邀请出书，《RocketMQ技术内幕》一书应运而生，从而成为我职业技能列表中非常亮眼的名片

1、搭建mysql服务器，并实现主主复制、半同步复制 存储引擎： 表类型：也称为“表类型”，表级别概念，不建议在同一个库中的表上使用不同的ENGINE； CREATE TABLE ... ENGINE[=]STORAGE_ENGINE_NAME ... SHOW TABLE STATUS 常见的存储引擎： MyISAM, Aria, InnoDB, MRG_MYISAM, CSV, BLACKHOLE, MEMORY, PERFORMANCE_SCHEMA, ARCHIVE, FEDERATED InnoDB：InnoBase Percona-XtraDB, Supports transactions, row-level locking, and foreign keys 数据存储于“表空间(table space)"中： (1) 所有数据库中的所有类型为InnoDB的表的数据和索引存储于同一个表空间中； 表空间文件：datadir定义的目录中 文件：ibdata1, ibdata2, ... (2) innodb_file_per_table=ON，意味着每表使用单独的表空间文件； 每表的数据文件（数据和索引，存储于数据库目录）存储于自己专用的表空间文件中，并存储于数据库目录下: tbl_name.ibd 表结构的定义：在数据库目录，tbl_name.frm 事务型存储引擎