200字范文,内容丰富有趣,生活中的好帮手!
200字范文 > SpringCloud Alibaba 从入门到精通(精选)

SpringCloud Alibaba 从入门到精通(精选)

时间:2020-02-29 10:51:55

相关推荐

SpringCloud Alibaba 从入门到精通(精选)

SpringCloud Alibaba 从入门到精通

一. 课程介绍1.1 课程导学1.2 项目环境搭建 二. SpringBoot基础2.1 本章概述2.2 Spring Boot是什么?能做什么?2.3 编写第一个SpringBoot应用2.4 Spring Boot应用组成分析2.5 SpringBoot 开发三板斧2.6 必会 Spring Boot Actuator 是什么?2.7 必会 Spring Boot 配置管理2.8 必会 Profile2.9 本章总结 三. 微服务的拆分与编写3.1 本章概述3.2 单体应用3.3 微服务3.4 项目效果演示3.5 微服务拆分3.6 项目架构图3.7 数据库设计3.8 API文档3.9 如何创建小程序3.10 前段代码如何使用3.11 创建项目-13.12 创建项目-23.13 整合Lombok简化代码编写3.14 解决IDEA的红色警告3.18 现有架构存在的问题 四. Spring Cloud Alibaba介绍4.1 Spring Cloud Alibaba是什么4.2 版本与兼容性4.3 为项目整合SpringCloudAlibaba 五. 服务发现-Nacos5.1 服务提供者与服务消费者5.2 大白话剖析服务发现原理5.3 什么是Nacos?5.4 搭建Nacos Server5.5 将应用注册到Nacos5.6 为内容中心引入服务发现5.7 Nacos服务发现的领域模型5.8 Nacos元数据 六. 实现负载均衡6.1 负载均衡的两种方式6.2 手写一个客户端侧负载均衡器6.3 使用Ribbon实现负载均衡6.4 Ribbon组成6.5 Ribbon内置的负载均衡规则6.6 细粒度配置自定义01-Java代码6.7 细粒度配置自定义02-父子上下文6.8 细粒度配置自定义03-配置属性6.9 细粒度配置自定义04-两种方式6.10 细粒度配置自定义05-最佳实践6.11 全局配置6.12 支持的配置项6.13 饥饿加载6.14 扩展Ribbon-支持Nacos权重6.15 扩展Ribbon-同一集群优先调用6.16 扩展Ribbon-基于元数据的版本6.17 深入理解Nacos的NameSpace6.18 现有架构存在的问题 七. 声明式HTTP客户端: Feign7.1 使用Feign实现远程Http调用7.2 Feign的组成7.3 细粒度配置自定义-01-Java代码7.4 细粒度配置自定义-02-配置属性7.5 全局配置-01-Java代码方式7.6 全局配置-02-配置属性方式7.7 支持的配置项7.8 配置最佳实践总结7.9 Feign的继承7.10 GetMapping如何发送Feign请求7.11 Feign脱离Ribbon使用7.12 RestTemplate VS Feign7.13 Feign常见性能优化7.14 常见问题总结 八. 服务容错8.1 雪崩效应8.2 常见容错方案8.3 使用Sentinel实现容错8.4 Sentinel控制台8.5 流控规则8.6 降级规则详解8.7 热点规则详解8.8 系统规则详解8.9 授权规则详解8.10 代码配置详解8.11 Sentinel与控制台通信原理剖析8.12 控制台相关配置项8.13 Sentinel API详解8.14 SentinelResource注解详解8.15 RestTemplate整合Sentinel8.16 Feign整合Sentinel8.17 Sentinel使用姿势总结8.18 规则持久化01-拉模式8.19 规则持久化02-推模式8.20 生产环境使用Sentinel8.21 集群流控8.22 扩展Sentinel01- 错误页优化8.23 扩展Sentinel02- 实现区分来源8.24 扩展Sentinel03- RESTFUL URL8.25 扩展Sentinel04- 通过现象看本质8.26 配置项总结8.27 本章总结:再谈常见容错方案 九. 消息驱动的微服务-Spring Cloud Alibaba9.1 Spring实现异步的方法9.2 引入MQ后的架构演进9.3 MQ适用场景9.4 MQ的选择9.5 搭建RocketMQ9.6 搭建RocketMQ控制台9.7 RocketMQ的术语与概念9.8 RocketMQ进阶9.9 Spring消息编程模型019.10 Spring消息编程模型029.11 分布式事务019.12 分布式事务02- 编码9.13 Spring Cloud Stream 是什么?9.14 Spring Cloud Stream 编程模型9.15 Spring Cloud Stream 代码-消息生产者9.16 Spring Cloud Stream 消息消费者9.17 Spring Cloud Stream 接口自定义:消息生产者9.18 Spring Cloud Stream 接口自定义:消息消费者9.19 消息过滤9.20 Spring Cloud Stream 的监控9.21 Spring Cloud Stream 异常处理9.22 Spring Cloud Stream + RocketMQ实现分布式事务 十. Spring Cloud Gateway10.1 为什么要使用网关10.2 Spring Cloud Gateway 是什么?10.3 编写Spring Cloud Gateway10.4 核心概念10.5 架构剖析10.6 内置路由谓词工厂详解(Route Predicate Factories)10.7 自定义路由谓词工厂10.8 内置过滤器工厂详解10.9 自定义过滤器工厂10.10 全局过滤器10.11 悬念:如何为Spring Cloud Gateway 整合Sentinel?10.12 监控SpringCloud gateway10.13 排错、调试技巧总结10.14 进阶:再谈过滤器执行顺序10.15 Spring Cloud Gateway限流10.16 本章总结 十一. 微服务的用户认证与授权11.1 认证授权-必然会面临的话题11.2 有状态vs 无状态11.3 微服务认证方案 01 “处处安全”11.4 微服务认证方案 02 - 外部无状态,内部有状态方案11.5 微服务认证方案 03 - 网关认证授权、内部裸奔方案11.6 微服务认证方案 04 内部裸奔改进方案11.7 微服务认证方案 05 方案对比11.8 访问控制模型11.9 JWT是什么?【是什么、组成】11.10 AOP实现登录状态检查11.11 Feign实现Token传递11.12 RestTemplate实现Token传递11.13 Java 自定义注解11.15 本章总结 十二. 配置管理12.1 为什么要实现配置管理?12.2 使用Nacos管理配置12.3 配置属性动态刷新与回滚12.4 应用的配置共享12.5 引导上下文12.6 数据持久化12.7 搭建生产可用的Nacos集群12.8 配置最佳实践总结 十三. 调用链监控-Sleuth13.1 调用链监控13.2 整合Sleuth13.3 Zipkin搭建与整合13.4 整合Zipkin之后Nacos报错的解决13.5 为所有微服务整合Zipkin13.6 Zipkin数据持久化13.7 依赖关系图 十四. 既有代码优化与改善14.1 简单指标: Statistic14.3 Alibaba Java代码规约(P3c)14.4 SonarQube 十五. 进阶:多维度微服务监控1.51 本章概要15.2 Spring Boot Actuator监控数据库15.3 JVM监控15.4 GC日志、线程Dump日志、堆Dump可视化分析15.5 日志监控15.6 其他监控 十六. 进阶:完美融合异构微服务17.1 如何完美整合异构微服务17.2 Spring Cloud Wii实现完美整合 十八.课程总结:

一. 课程介绍

1.1 课程导学

什么是SpringCloudAlibaba?

阿里巴巴结合自身微服务实践,开源的微服务全家桶在Spring Cloud项目中孵化,很可能成为Spring Cloud第二代标准的实现在业界广泛使用,已有很多成功案例

Spring Cloud Alibaba真实应用场景

大型复杂的系统,例如大型电商系统高并发系统,例如大型门户,秒杀系统需求不明确,且变更很快的系统,例如初创公司业务系统

Spring Cloud Alibaba与Spring Cloud

简单来说,SpringCloud Alibaba是SpringCloud的子项目,它是SpringCloud第二代的实现;图示如下:

总结来说: 组件性能更强良好的可视化界面搭建简单,学习曲线低文档丰富并且是中文

阅读本博客你能学到什么?

SpringCloud Alibaba核心组件的用法及实现原理SpringCloud Alibaba结合微信小程序,从“0”学习真正开发中的使用实际工作如何避免踩坑,正确的思考问题方式SpringCloud Alibaba的进阶:代码的优化和改善,微服务监控

课程进阶会讲那些内容?

课程思路:

分析并拆解微服务编写代码分析现有架构问题引入微服务组件优化重构

SpringCloud Alibaba的重要组件精讲,如图所示:

1.2 项目环境搭建

课上用到的软件

JDK8MySQLMaven安装与配置IDEA及一些快捷键

安装Maven:

我们可以用IDEA自带的Maven,也可以自行下载安装Maven使用

安装JDK和MySQL

我们可以通过网上搜索相关教程安装

二. SpringBoot基础

2.1 本章概述

2.2 Spring Boot是什么?能做什么?

是什么? SpringBoot是一个快速开发的脚手架 作用? 快速创建独立的、生产级的机遇Spring的应用程序 特性? 无需部署WAR文件提供starter简化配置尽可能自动配置Spring以及第三方库提供“生产就绪”功能,例如指标、健康检查、外部配置等无代码生成&无XML

2.3 编写第一个SpringBoot应用

需求: 整合Spring MVC/test路径,我们成为“端点” 使用Spring Initializr快速创建SpringBoot 应用

点击Create New Project -> Spring Initializr -> 配置JDK-> 选择Default-> 点击Next,如图所示:

根据自己实际配置好Group及Artifact,Type选Maven(若为Gradle项目也可以选Gradle),其他根据实际配置,如图所示:

选择需要的依赖,同时选择SpringBoot版本,其中如图所示的,除了2.1.5外,上方的都不是正式版,所以我们选择版本为2.1.5,如图所示:

我们可以自己部署一个Costom,结合官方文档和网上文章,当为内王环境时,自己就可以部署一个,如图所示:

创建接口并启动访问,如图所示:

通过启动启动类,直接就可以运行项目,我们不需要打war包再放到tomcat中了;

2.4 Spring Boot应用组成分析

依赖:

注解:

配置:

静态文件: resource/static目录 模板引擎: 支持:Freemarker、Groovy、Thymeleaf、Mustache现在逐渐前后端分离开发,模板引擎用的越来越少了resource/templates 目录

2.5 SpringBoot 开发三板斧

加依赖(整合什么,就加什么的依赖) 官方提供的starter格式: spring-boot-starter-xxx非官方提供的starter格式: xxx-spring-boot-starter 写注解: 某些需要用到注解的,需要在启动类上或者指定的地方上加上注解 写配置: 可以是Bean类型的配置类也可以是在resource下的yml&properties&等加配置

2.6 必会 Spring Boot Actuator

是什么?

如何整合? 加依赖:

<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-actuator</artifactId></dependency>

直接启动,访问:ip:端口/actuator health: 健康检查 我们在application.yml中配置,让健康检查更加详细:

management.endpoint.health.show-details=always

如图所示:

status取值: UP: 正常DOWN: 遇到了问题,不正常OUT_OF_SERVICE: 资源未在使用,或者不该去使用UNKNOWN: 不知道 info:不是用于监控的,我们一般用于描述应用,使用key-value形式去写,如图所示: 展示内容如图:

提供的监控端点如图(此处列的是常用的,可以去官方文档查看全部的):

激活所有的Acttuator端点,在application.yml中添加:

激活指定的端点:

management.endpoints.web.exposure.include=metrics,health

多个以逗号隔开

2.7 必会 Spring Boot 配置管理

支持的配置格式: application.ymlapplication.yamlapplication.properties

properties中的值若为 * ,在yml中则需要改为 “*”

yml>yaml>properties 执行顺序,如果有重复内容,则properties为最终的结果

环境变量: 以 ${xxx} 形式标记变量名,在IDEA中可在 Environment variables 中添加环境变量,如图所示:

外部配置文件 spring-boot能够读取外部的配置文件,将其配置文件放同一路经下即可,且外部的配置文件优先级更高,如图所示:

命令行参数: 命令行中:

java -jar xxx.jar --server.port=8081

IDEA中:

2.8 必会 Profile

如何实现不同环境不同配置? 方式一: 配置如图:

在IDEA中指定要启动的环境:

不指定环境配置的时候,就只执行公共部分的配置,我们可以配置默认的环境配置方案,如图所示:

方式二: 我们也可以创建出多个profile配置文件,然后在配置的时候选择指定的配置文件,如图所示:

2.9 本章总结

使用Spring Initialize快速创建应用应用组成分析三板斧Actuator配置管理Profile

三. 微服务的拆分与编写

3.1 本章概述

3.2 单体应用

什么是单体架构? 一个归档包(例如War包)包含所有功能的应用程序,我们通常称为单体应用。而架构单体应用的方法论,就是单体应用架构 单体架构的优点 架构简单开发、测试、部署方便 单体架构的缺点: 复杂性高部署慢、频率低扩展能力受限(比如IO操作多的,和CPU操作多的,不能物尽其用)阻碍技术创新(更换技术栈不方便)

3.3 微服务

微服务定义

微服务架构风格是一种将一个单一应用程序开发为一组小型服务的方法,每个服务运行在自己的进程中,服务间通信采用轻量级通信机制(通常用HTTP资源API)。这些服务围绕业务能力构建并且可通过全自动和部署机制独立部署。这些服务共用一个最小型的集中式的管理,服务可用不同的语言开发,使用不同的数据存储技术;

微服务的特性:

每个微服务可独立运行在自己的进程里一系列独立运行的微服务共同构建起整个系统每个服务为独立的业务开发,一个微服务只关注某个特定的功能,例如订单管理、用户管理等可使用不同的语言与存储技术(契合项目情况与团队实力)微服务之间通过轻量的通信机制进行通信,例如通过REST API进行调用;全自动的部署机制

微服务架构图:

微服务的优点:

单个服务更易于开发、维护单个微服务启动较快局部修改容易部署技术栈不受限按需伸缩

微服务的缺点:

运维要求高分布式固有的复杂性重复劳动

微服务的适用场景

大型、复杂的项目服务压力大变更较快的服务

微服务不适用的场景

业务稳定迭代周期长

3.4 项目效果演示

xxx此处省略

3.5 微服务拆分

领域驱动设计(Domain Driven Design)面向对象(by name./ by berb.)根据名词或动词拆分 职责划分通用性划分 合适的粒度 良好地满足业务幸福感增量迭代持续进化

3.6 项目架构图

3.7 数据库设计

建模,如图所示:

然后导出,将其创建为实际的MySQL表

3.8 API文档

写Api文档,提前定义好要写哪些功能需求如图所示:

3.9 如何创建小程序

注册账号: https//mp.填写信息,申请创建小程序

在激活邮箱中点击跳转链接,完善补全如图信息:

进入小程序首页,我们可以配置小程序信息等,这里我们点击 **开发设置 **,查看AppId与AppSecret

3.10 前段代码如何使用

安装Node.js 前往 /en/download/ 下载node.js安装说明: windows操作系统,参考: /article/48206aea9bd880216ad6b305.htmlCenots系统,参考: /baby123/p/6955396.html安装macOS操作系统,用pkg直接拖动安装即可其他系统,百度nodejs{操作系统名称}安装。 假定已有对应nodejs前端项目 打包命令:

npm install

打包加速命令:

npm --registry https://registry. install

开发环境启动部署:

npm run dev

生产环境构建:

npm run build

下载&安装微信开发者工具: 前往: https://developers./miniprogram/dev/devtools/download.html 下载开发者工具安装开发者工具

3.11 创建项目-1

技术选型: Spring Boot(快速开发)Spring Mvc(MVC框架)Mybatis(持久层框架,操作数据库)+通用MapperSpring Cloud Alibaba(分布式) 项目结构规划:

3.12 创建项目-2

为项目引入通用Mapper 去掉原来的依赖(如果存在)

<dependency><groupId>org.mybatis.spring.boot</groupId><artifactId>mybatis-spring-boot-starter</artifactId></dependency>

换成通用mapper

<dependency><groupId>tk.mybatis</groupId><artifactId>mapper-spring-boot-starter</artifactId><version>2.1.5</version></dependency>

在启动类上使用MapperScan注解扫描需要的接口

@MapperScan("xxx")

如图所示:

application.yml中配置mysql相关信息

通用Mapper专用代码生成器生成的Model会在原有基础上增加@Table,@Id,@Column等注解,方便自动回数据库字段进行映射。运行MBG有多种方法,这里只是介绍两种比较常见的方法。并且有关的内容会针对这样的运行方式进行配置;

使用Java编码方式运行MBG: 在Generatr项目测试代码中包含这个例子:

/abel533/Mapper/blob/master/generator/src/test/java/tk/mybatis/mapper/generator/Generator.java

要使用这种方式,需要引入MBG的依赖,同时项目中应该已经有通用Mapper的依赖了。

使用Plugin的方式去运行:

将如图代码引入pom.xml中的对应位置:

maven-compiler-plgin在SpringBoot中提供了,我们可以不用加

resources/generator目录下创建generatorConfig.xml文件,如图所示:

可以去百度这个文件下的内容,将对应的占位符信息填充即可

如果有外部的config.properties引用,我们需要单独创建一个,将里面引入的比如username,password等信息在config.properties中补充,如图所示:

补充完,并且在generatorConifg.xml中配置好了所有的内容后,点击右侧Maven的插件: mybaits-generator 选择generate即可生成代码,如图所示:

它能生成model,也能生成通用maper的代码,如图所示:

3.13 整合Lombok简化代码编写

Lombok

作用: 简化代码编写,提升开发效率

项目主页:(/)[/]

IDEA中整合Lombok:

在IDEA中安装好了插件后,引入下方依赖(也可以自行百度最新版本)

<dependency><groupId>org.projectlombok</groupId><artifactId>lombok</artifactId><version>1.18.8</version><scope>provided</scope></dependency>

使用@Getter,@Setter,@ToString,@EqualsAndHashCode可以自动生成getter,setter,tostring等方法,如图所示:

注解说明:

使用@Data就相当于使用上面这几个注解,它内部聚合了这几个注解;@RequiredArgsConstructor是为标记为final的属性生成构造方法;@Builder使用了建造者模式,可以以这种方式去创建对象并且同时赋值;@Sl4j 注解,可以直接使用log功能

稳定功能和实验室功能,具体的可以在官网查看功能说明及示例;

lombok与代码生成器:

Lombok增加model代码生成时,可以直接生成lombok的@Getter@Setter@ToString@Accessors(chain=true)四类注解使用者在插件配置项中增加 即可生成对应包含注解的model类

3.14 解决IDEA的红色警告

当我们引入mapper的时候,会暴露这样的警告:

可以看到userMapper下有一个红色警告。虽然代码本身没有问题,能正常运行,但有个警告总归有点恶心。本文分析原因,并列出解决该警告的集中方案;

原因: 众所周知,IDEA是非常智能的,它可以理解Spring的上下文。然而UserMapper这个接口是Mybatis的,IDEA理解不了。而@Autowired默认情况下要求依赖对象(也就是userMapper)必须存在。而IDEA认为注射个对象的实例/代理是个null,所以就友好的给个提示。 解决方案: 方法一:为@Autowired注解设置required= false,允许null值就不会有警告了。如图所示:

方法二:用@Resource替换@Autowired

方法三: 在Mapper接口上加上@Repository注解方法四: 使用Lombok的注解,使用构造方法注入的方式; 直接在类上面使用此注解即可:

@RequiredArgsConstructor()

也可以使用此方式,更推荐:

@RequiredArgsConstructor(onConstructor = @__(@Autowired))

如图所示:

总结: 此种方式最为推荐,原因有2: Spring官方并不建议直接在类的field上使用@Autowired注解,原因详见 《Why field injection is evil》,用本方法可将field注入编程构造方法注入,Spring是比较推荐的。体现了Lombok的优势,简化了你的代码。而且你也不用在每个field上都加上@Autowired注解了。

不过这种方式也有缺点: 那就是如果你类之间的依赖比较复杂,特别是存在循环依赖(A引用B,B引用A,或者间接引用时),引用将会启动不起来…这其实是构造方法注入方式的缺点;

方式五: 把IDEA的警告关闭掉方式六: 安装Mybatis plugin插件(如图所示:)

3.18 现有架构存在的问题

地址发生变化了怎么办?如何实现负载均衡?用户中心挂掉了怎么办?

四. Spring Cloud Alibaba介绍

4.1 Spring Cloud Alibaba是什么

快速构建分布式系统的工具集(主要功能如图所示:)

部分子项目如图:

常用子项目如图:

什么是SpringCloudAlibaba? 它是Spring Cloud的子项目致力于提供微服务开发的一站式解决方案 包含微服务开发的必备组件机遇Spring Cloud,符合Spring Cloud标准阿里的微服务解决方案 SpringCloud Alibaba的功能描述:

我们整理后如图所示:

4.2 版本与兼容性

我们平时的版本是语义化的版本控制,在version中的版本号描述了此版本的大致情况,如图所示:

SpringCloud很多项目是以字母排序命名的,因为它容易与它的一些子依赖的版本号起歧义,所以干脆不用数字了。

版本释义:

SpringCloud发布生命周期 版本发布计划:(/spring-cloud/spring-cloud-release/milestones)[/spring-cloud/spring-cloud-release/milestones]版本发布记录:(/spring-cloud/spring-cloud-release/releases)[/spring-cloud/spring-cloud-release/releases]版本终止声明:(https://spring.io/projects/spring-cloud#overview)[https://spring.io/projects/spring-cloud#overview] 版本兼容性:

未来版本兼容性(如果SpringCloudAlibaba进入第二代后:)

生产环境如何选用版本? 坚决不用非稳定版本/end-of-life版本尽量用最新一代 xxx.RELEASE版本缓一缓SR2之后一般可大规模使用

4.3 为项目整合SpringCloudAlibaba

整合SpringCloudAlibaba

整合SpringCloud

引入依赖,如图所示:

整合SpringCloudAlibaba

如果使用的是Greenwich版本,则使用如图依赖:

如果使用的是Finchley版本,则使用如图依赖:

第一种方式整合cloud以及Alibaba如图所示:

使用了如图所示内容后,我们在引入Cloud中的其他组件时,可以不指定版本,它会自动配置对应的版本。如果没有使用如图内容可能会导致依赖冲突,依赖不一致的情况;

五. 服务发现-Nacos

5.1 服务提供者与服务消费者

服务提供者:服务的被调用方(即:为其他微服务提供接口的微服务)服务消费者:服务的调用方(即:调用其他微服务接口的微服务)

5.2 大白话剖析服务发现原理

问题:如果用户地址发生变化,怎么办? 服务发现机制就是通过一个中间件去记录服务提供者的ip地址,服务名以及心跳等数据(比如用mysql去存储这些信息),然后服务消费者会去这个中间平台去查询相关信息,然后再去访问对应的地址,这就是服务注册和服务发现。当用户地址发生了变化也没有影响,因为服务提供方修改了用户地址,在中间件中会被更新,当服务消费方去访问中间件时就能及时获取最新的用户地址,就不会出现用户地址发生变化导致服务找不到

5.3 什么是Nacos?

(官方文档:hptps://nacos.io/zh-cn/docs/what-is-nacos.html)[]微服务全景架构图:

引入Nacos后的架构演进图:

5.4 搭建Nacos Server

下载Nacos Server (下载地址)[/alibaba/nacos/releases] 搭建Nacos Server (参考文档)[https://nacos.io/zh-cn/docs/quick-start.html] 启动服务器: Linux/Unix/Mac:

sh startup.sh -m standalone

Windows:

cmd startup.md

此处启动命令为单机模式,非集群模式

5.5 将应用注册到Nacos

目标: 用户中心注册到Nacos内容中心注册到Nacos测试: 内容中心总能找到用户中心 用户中心注册到Nacos 加依赖:

<dependency><groupId>org.springframework.cloud</groupId><artifactId>spring-cloud-starter-alibaba-nacos-discovery</artifactId></dependency>

在SpringCloud中的依赖规则与SpringBoot类似。官方项目是以此作为结构:spring-cloud-starter-{spring cloud子项目的名称}-{模块名称},比如feign可以这样:spring-cloud-starter-openfeign,而sentinel可以这样:spring-cloud-starter-alibaba-sentinel,当没有模块的时候,就不用加模块了,比如feign就没有

加注解: 早期在启动类上需要加上 @EnableDiscoveryClient注解,现在已经可以不需要加了 加配置:

spring:cloud:discovery:server-addr: localhost:8848 #指定nacos server的地址application:name: 服务名称 # 比如 user-center,服务名称尽量用- ,不要用_

5.6 为内容中心引入服务发现

内容中心引入参照章节5.5,其他服务也如此,服务名称相应变化一下;注册成功如图所示:

使用DiscoverClient的相关Api可以在代码中获取Nacos提供的微服务的一些信息,调用方法如图:

5.7 Nacos服务发现的领域模型

如图所示:

不同namespace是隔离的,使用Group可以进行管理(比如多个机房多个服务,可以将同机房的服务分一个组),Cluster是同一个Cluster下会尽量调用自己的Cluster服务;各个关键字释义如下: Namespace: 实现隔离,默认publicGroup: 不同服务可以分到一个组,默认DEFAULT_GROUPService: 微服务Cluster: 对指定微服务的一个虚拟划分,默认DEFAULTInstance: 微服务实例 指定方法,代码如图: 首先在Nacos中配置NameSpace:

然后在代码中添加字段:

5.8 Nacos元数据

什么是元数据?(Metadata) Nacos数据(如配置和服务)描述信息,如服务版本、权重、容灾策略、负载均衡策略、鉴权配置、各种自定义标签(label),从作用范围来看,分为服务级别的元信息、集群的元信息及实例的元信息。 应用(Application) 用于标识服务提供方的服务的属性 服务分组(Service Group) 不同的服务可以归类到同一分组 虚拟集群(Virtual Cluster) 同一个服务下的所有服务实例组成一个默认集群,集群可以被进一步按需求划分,划分的单位可以是虚拟集群; 元数据是什么? (官方描述)[https://nacos.io/zh-cn/docs/concepts.html]级别: [服务级别、集群级别、实例级别] 元数据作用: 提供描述信息让微服务调用更加灵活: 例如微服务版本控制 元数据操作方式: 如上图中可以在Nacos Server中进行 集群、服务、实例各级别的元数据控制在application.yml中进行配置,如图所示:

六. 实现负载均衡

6.1 负载均衡的两种方式

服务器端负载均衡:

客户端负载均衡:

6.2 手写一个客户端侧负载均衡器

手写负载均衡器部分代码如图:

手写负载均衡器主要原理就是获取到此服务的所有url,然后以轮询、随机等方式进行调用指定的url

6.3 使用Ribbon实现负载均衡

Ribbon是什么? Ribbon为我们提供了丰富的负载均衡算法; 引入Ribbon: 加依赖: 此步骤省略,因为Nacos已经结合了Ribbon写注解: 在RestTemplate的Bean上加@LoadBalanced,如图所示:

@Bean@LoadBalancedpublic RestTemplate restTemplate{return new RestTemplate()}

使用RestTemplate:

6.4 Ribbon组成

Ribbon的组成如图,若不合适自己的,可以进行重写

6.5 Ribbon内置的负载均衡规则

负载均衡规则如图:

6.6 细粒度配置自定义01-Java代码

用Java代码配置 在与启动类包下创建:

@RibonClient(name = "服务名称", configuration=RibbonConfiguration.class)public class XXXRibbonConfiguration{}

如图所示:

在与启动类包不同路径下创建:

@Configurationpublic class RibbonConfiguration{@Beanpublic IRule ribbonRule(){// 随机return new RandomRule();}}

如图所示:

Ribbon的启动类不能被启动类扫描到,不然容易发生父子上下文重叠,出现各种bug问题;

6.7 细粒度配置自定义02-父子上下文

官方描述如图,父子上下文重叠会变成全局共享,所有服务都是这个配置;

6.8 细粒度配置自定义03-配置属性

在resource目录下的application.yml中添加配置:

xxx服务名称:ribbon:NFLoadBalancerRuleClassName: flix.loadbalancer.RandomRule # 想要的规则的类的所在全路径

如图所示:

6.9 细粒度配置自定义04-两种方式

对比如图所示:

属性配置方式优先级更高。

6.10 细粒度配置自定义05-最佳实践

尽量使用属性配置,属性方式实现不了的情况下再考虑用代码配置在同一个微服务内尽量保持单一性,比如统一使用属性配置,不要两种方式混用,增加定位代码的复杂性;

6.11 全局配置

让父子上下文重叠(强烈不建议使用,因为可能会导致项目无法启动,同时也不是科学的解决方案)在我们定义的XXXRibbonConfiguration中,把configuration改为defaultConfiguration即可,代码如图所示:

6.12 支持的配置项

如图的每一项都支持,方式就是定义一个Bean,去返回它的实现类。如果配置实现类,则给指定的key值,value值为实现类的全路径地址;配置规则如图:

代码配置如图所示:

配置属性方式如图所示:

代码配置和属性配置与之前上面的自定义配置一样;

6.13 饥饿加载

在使用RestTemplate的时候,用Rabbon时会进行懒加载,头一次的访问会比较慢。我们可以通过改变加载模式,将懒加载改为饥饿加载,这样第一次请求就不会慢了,在application.yml中进行配置:

ribbon:eager-loadenabled: trueclients: xxx服务名 # 多个服务,以 `,`号分割

此处为开启饥饿加载

6.14 扩展Ribbon-支持Nacos权重

因为Spring中的子项目没有对权重进行定义规范,所以它不支持权重,而Nacos是支持的;扩展Ribbon支持权重的三种方式: hppts:///article/288660操作如图: 定义一个类去继承另外一个类AbstractLoadBalancerRule并实现方法,如图所示:

补全代码:

定义Bean替换默认的:

在Nacos中编辑权重:

6.15 扩展Ribbon-同一集群优先调用

服务发现的领域模型:

使用Cluster可以非常方便的实现统一集群优先调用的办法,具体可百度

6.16 扩展Ribbon-基于元数据的版本

多版本共存的时候,某些接口只对指定的版本生效,我们可以扩展Ribbon,使用Nacos元数据来解决这个问题;元数据解决办法,文档跳转:使用元数据解决数据共存问题

6.17 深入理解Nacos的NameSpace

NameSpace是命名空间。处于不同命名空间的服务,它们之间是隔离的,通过这个特点,我们可以多个环境同时注册Nacos,通过处于不同的命名空间,去区分dev/test/prod等不同环境代码如图:

6.18 现有架构存在的问题

远程调用代码不可读,url过长,不能准确区分出服务,复杂的url难以维护微服务适应于快速迭代,就目前而言,难以响应需求的变化编程体验不统一

七. 声明式HTTP客户端: Feign

7.1 使用Feign实现远程Http调用

Feign是NetFlix的一款声明式远程调用HTTP客户端;GitHub地址整合办法: pom.xml中引入依赖

<dependency><groupId>org.springframework.cloud</groupId><artifactId>spring-cloud-starter-openfeign</artifactId></dependency>

写注解,启动类上加上@EnableFeignClients注解写配置,暂时没有写一个Feign示例:

@FeignClient(name="xxx服务名称")public interface xxxFeignCLient{/*** 这是一个Feign的失恋了* * /@GetMapping("xxx/xxx")XXX findById(xxx xxx)}

类似于如图所示:

Feign与Ribbon也可以一起整合,可以参考Feign的整合方式

7.2 Feign的组成

组成如图所示:

使用RequestInterceptor可以进行拦截,我们可以加上通用逻辑,比如为每个Feign的方法在调用的时候,都加上Header,Header里可以统一带上AuthToken

7.3 细粒度配置自定义-01-Java代码

Feign的日志级别:

Feign的日志级别与通用的日志级别不同,它自己定义了四种日志级别

用Java代码配置如图:

在配置类中,不能加@Configuration,如果加了必须在启动类能扫描的地方以外,否则会发生父子上下文异常,导致全局共享这个配置类

7.4 细粒度配置自定义-02-配置属性

在resource/appilcation.yml中进行配置:

feign:client:config:# 想要调用的微服务名称user-center: loggerLevel: full

7.5 全局配置-01-Java代码方式

让父子上下文重叠(不建议,这是以不正规的方式实现的)唯一正确的途径: 在启动类中的 @EnableFeignClients(defaultConfiguration=xxx.class)

7.6 全局配置-02-配置属性方式

在resource/application.yml中进行设置

7.7 支持的配置项

代码方式,如图所示:

属性方式,如图所示:

7.8 配置最佳实践总结

概述: Rinnbon配置 vs Feign配置Feign代码方式 vs 属性方式最佳实践总结 对比图如图:

Feign代码方式 Vs 属性方式:

最佳实践: 尽量使用属性配置,属性方式实现不了的情况下再考虑用代码配置在同一个微服务内尽量保持单一性,比如统一使用属性配置,不要两种方式混用

7.9 Feign的继承

当我们有一些服务存在一些相同的Feign远程调用时,我们可以将这些通用的Feign独立出来,然后写在外部的一些地方然后引用进来,直接继承。这样就可以一次修改,处处生效,同时遵循契约写法。官方不建议使用,因为这样会导致多个微服务紧耦合。实际上很多公司在采用这种方式,个人可以权衡利弊。

7.10 GetMapping如何发送Feign请求

使用@GetMapping请求方式的Feign调用,它仍然会发送Post请求,所以会导致请求异常;解决办法如下: 使用@SpringQueryMap 推荐,如图所示:

@FeignClient("xxxx-xx")public interface UserFeignClient{@GetMapping("/get")public User get0(@SpringQueryMap User user);}

方法二:Url中有几个参数,Feign接口中的方法就有几个参数。使用@RequestParam注解指定请求的参数是什么

@FeignClient("xxxx-xx")public interface UserFeignClient{@GetMapping("/get")public User get0(@RequestParam("id")Long id,@RequestParam("username")String str);}

多参数的Url也可以使用Map来进行构建。当目标Url参数非常多的时候,可使用这种方式简化Feign接口的编写:

@FeignClient("xxxx-xx")public interface UserFeignClient{@GetMapping("/get")public User get0(@RequestParam Map<String,Object>map);}

调用时可以使用类似如图代码:

7.11 Feign脱离Ribbon使用

脱离Ribbon使用就是不直接指定服务名去调用,而是直接填入url地址:代码如图所示:

Feign支持占位符,如图所示:

在早期的Spring Cloud版本中,无需提供name属性,从Brixton版开始,@FeignClient必须提供name属性,否则应用将无法正常启动;

7.12 RestTemplate VS Feign

对比如图:

如何选择?

原则:尽量使用Feign,杜绝使用RestTemplate事无绝对,合理选择,就是如果Feign解决不了的,只有RestTemplate才能的情形

7.13 Feign常见性能优化

配置连接池(提升15%左右)

okHtpp HttpClient都支持连接池

配置HttpClient:

引入依赖:

<dependency><group>io.github.openfeign</groupId><artifactId>feign-httpclient</artifactId></dependency>

application.yml中进行配置:

feign:client:config:#全局配置default:loggerLevel: fullhttpclient:# 让Feign使用 apache httpclient做请求,而不是默认的urlHttpenabled: true# feign的最大连接数max-connections:200# feign单个路径的最大连接数max-connections-per-route: 50

如图所示:

也可以使用OkHttp:

引入依赖:

<dependency><groupId>io.github.openfeign</groupId><artifactId>feign-okhttp</artifactId><version>10.1.0</verrsion></dependency>

在application.yml中增加配置:

还有一个优化是降低日志级别,越低的日志级别,打印的日志越少,同时性能就越高

7.14 常见问题总结

地址:/article/289005

八. 服务容错

8.1 雪崩效应

在我们的系统中,当一个服务宕机后,其他服务如果需要来访问这个服务时,就会得不到结果,然后会一直等待此服务返回结果,直至调用超时。每个一个访问请求都是一个线程资源,当服务的调用次数过多,就会导致大量的资源得不到释放,可能就会导致消费服务方也宕机,这样类推会导致雪崩效应,就是由一个服务宕机导致其他服务系统资源被持续占用消耗得不到释放,从而引发一连串的级联失败。

8.2 常见容错方案

设置超时时间设置限流仓壁模式:

比如这个船,里面每个船舱都是独立的,当一个船舱进水了,也不会导致所有的船舱进水,从而使船沉没。每个Controller作为一个“船舱”

断路器 参考我们日常中的电闸,当用电量超过阀值时,就会跳闸;短路器的三态转换:

8.3 使用Sentinel实现容错

Sentinel是什么? 它是一个轻量级容错的库 引入:

引入依赖:

<dependency><groupId>org.springframework.cloud</groupId><artifactId>spring-cloud-starter-alibaba-sentinel</artifactId></dependency>

引入actuator

<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-actuator</artifactId></dependency>

application.yml 加入配置,暴露端点:

访问 localhost:服务端口号/actuator/sentinel,出现如下图所示画面,即为配置完成:

8.4 Sentinel控制台

搭建控制台: (地址)[/alibaba/Sentinel/releases]版本选择: 根据我们的依赖版本或者使用最新的也可以,如果用在生产环境,最好是依赖与控制台版本相同;使用方式:

下载

传入服务器,运行以下命令启动:

访问web页面:ip/8080/#/login,输入账号密码均为: sentinel

添加配置:

spring:cloud:sentinel:transport:# 指定sentinel 控制台地址dashboard: localhost:8080

sentinel是懒加载

8.5 流控规则

QPS 和线程数,是过滤条件,以哪种方式来进行过滤。单机阀值是达到多少量后进行流控;

流控模式有三种,分别是直接、关联和链路。直接就是最常见的一种模式,限流达到了,直接对这个接口生效。而流控效果就是生效的三种形式;快速失败也是最常用的一种,就是当达到阀值后,这个直接接口直接返回失败。而流控模式-关联 表示,当访问填入入口资源的路径的单机阀值触发了,此接口就会触发所选择的流控效果;而链路就表示只对此入口过来的数据对此接口触发限流规则;Warm up是热等待,它会在指定的时间后完成触发效果;排队等待是不返回失败,而是进行排队,一个处理完了,再去处理另外一个。

Warm Up

它可以让流量缓慢增加。

排队等待:

8.6 降级规则详解

RT降级规则图示:

图一:

图二:

RT 默认最大4900ms,通过 -Dcsp.sentinel.statistic.max.rt=xxx 修改

降级-异常比例:

降级-异常数:

注意点: 时间窗口 < 60秒可能会出问题 比如我们设置时间窗口为10秒,当触发降级内如果异常数依然触发降级,那么可能会再次降级

源码:

com.alibaba.csp.sentinel.slots.block.degrade.DegradeRule#passCheck

官方解释:

注意: 目前Sentinel没有半开状态,后期可能会推出半开;

8.7 热点规则详解

热点规则的功能是,能够对指定的接口进行限流。可以对这个接口的某个参数,某个类型,以及这个参数取某个值时单位时间内限流等;它能够对一些热点接口起到保护的作用,所以叫做热点规则;定义一个热点规则: 定义接口:

配置热点规则

适用于场景: QPS非常高的接口或者参数参数必须为基本类型或者String 源码地址: com.alibaba.csp.sentinel.slots.block.flow.param.ParamFlowChecker#passCheck

8.8 系统规则详解

图示:

系统-Load:

系统-RT、线程数、入口QPS:

源码地址:

com.alibaba.csp.sentinel.slots.block.flow.param.ParamFlowChecker#passCheck

8.9 授权规则详解

概述: 授权规则可以对服务消费者的授权,限制访问等 图示:

8.10 代码配置详解

配置方法手记:配置方法手记扩展Sentinel以及学习其架构有一定意义,我们也可以直接通过这个界面去配置就可以。

8.11 Sentinel与控制台通信原理剖析

问题: 控制台是如何获取到微服务的监控信息的? 定时推送到控制台 用控制台配置规则时,控制台是如何将规则发送到各个微服务的呢? 相关源码:

8.12 控制台相关配置项

图示:

操作: 启动Sentinel jar的时候,传入参数即可,如图:

8.13 Sentinel API详解

图示:

这样就会统计这个流控,同时如果超过限流阀值,就会执行catch内的代码;

监控其他异常情况:

来源:

图示:

结尾需要关闭流

针对此来源的服务可以进行单独限流规则:

主要API:

SphU:定义资源,让资源被监控,并且可以保护资源Tracer: 对我们想要的其他异常进行统计ContextUtil:针对来源

后期我们可以用更简单的办法来实现,但都是基于此上图中的代码实现的;

8.14 SentinelResource注解详解

使用此注解可以完成8.13的功能,手记地址: 手记地址

代码图示:

这里面的block可以处理限流或者降级。处理降级可以单独使用fallback关键字,然后也类似于block一样写一个方法即可;升级到sentinel 1.6 可以处理Throwable

相关源码:

com.alibaba.csp.sentinel.annotation.aspectj.SentinelResourceAspectcom.alibaba.csp.sentinel.annotation.aspectj.AbstractSentinelAspectSupport

8.15 RestTemplate整合Sentinel

只需要使用@SentinelRestTemplate注解即可 图示:

开关在 application.yml中进行配置

代码如图所示:

为RestTemplate加上注解:

代码中使用RestTemplate即可,这样会在Sentinel获取到监控信息,如果将开关改为false,则就不能获取到信息了。

8.16 Feign整合Sentinel

使用Fallback:

添加配置:

在Feign中指向一个类:

补全这个类:

使用FallbackFactory,它的功能更强大,且能够拿到异常: 定义类:

Feign去引用这个FallbackFactory:

源码: org.springframework.cloud.alibaba.sentinel.feign.Sentinel

8.17 Sentinel使用姿势总结

8.18 规则持久化01-拉模式

手记地址:手记地址

配置好了重新刷新可能会没有数据展示,可以先去访问接口再回来刷新,因为它是懒加载模式;

拉模式优缺点:

8.19 规则持久化02-推模式

手记地址:手记地址

8.20 生产环境使用Sentinel

8.21 集群流控

集群流控官方文档: hppts:///alibaba/Sentinel/wiki/集群流控

网关gateway也可以实现类似集群流控的效果,且更加简单,性能更好;

8.22 扩展Sentinel01- 错误页优化

使用UrlBlockHandler可以优化错误提示,这样我们能区分出这个接口是因为限流降级还是异常的原因导致的;代码操作:

继承接口:

编写代码:

返回结果

8.23 扩展Sentinel02- 实现区分来源

区分来源:

将指定来源配置规则:

8.24 扩展Sentinel03- RESTFUL URL

使用如下图代码,可以让所有相同资源名称的路径使用相同的限流规则:

配置资源如图:

8.25 扩展Sentinel04- 通过现象看本质

总结来说:

8.26 配置项总结

配置项总结手记:配置项总结手记

8.27 本章总结:再谈常见容错方案

常见容错方案: 超时限流仓壁模式(没有实现): Sentinel虽然没有用仓壁模式,但是它规定了哪些线程用于哪些地方,这样实现了类似仓壁模式的效果断路器

九. 消息驱动的微服务-Spring Cloud Alibaba

9.1 Spring实现异步的方法

AsyncRestTemplate: 参考文档@Async注解: 参考文档WebClient(Spring 5.0引入):参考文档MQ

9.2 引入MQ后的架构演进

引入MQ后,一些同步耗时的地方可以用异步处理,MQ作为一个中间件连接两个地方

9.3 MQ适用场景

异步处理流量削峰填谷解耦微服务

9.4 MQ的选择

MQ的种类: KafkaRabbitMQRocketMQActiveMQ 手记:MQ的选择RocketMQ成功案例: 参考

9.5 搭建RocketMQ

手记

9.6 搭建RocketMQ控制台

手记

9.7 RocketMQ的术语与概念

术语/概念:

9.8 RocketMQ进阶

如果要完整的去理解RocketMQ,我们需要阅读开发者指南

9.9 Spring消息编程模型01

在项目中使用RocketMQ:

引入依赖:

写注解: 无注解

写配置:

引入RocketTemplate:

发送消息:

不指定group会报异常,后期不知是否会处理这种;

工具类的使用: RocketMQ: RocketMQTemplateActiveMQ/Artemis:JmsTemplateRabbitMQ:AmqpTemplateKafka: KafkaTemplate

9.10 Spring消息编程模型02

我们已经编写好了消息的生产者,接下来我们来编写消息的消费者:步骤如下: 引入依赖:

<dependency><groupId>org.apache.rocketmq</groupId><artifactId>rocketmq-spring-boot-starter</artifactId><version>2.0.3</version></dependency>

写配置,在application.yml中编写:

rocketmq:name-server:127.0.0.1:9876

name-server的值根据每个人自身实际的ip及端口来填写,以我们安装的rocketmq地址来决定

创建接收消息的对象:

@Data@NoArgsConstructor@AllArgsConstructor@Builderpublic class UserAddBOnusMsgDTO{/*** 为谁加积分*/private Integer userId;/*** 加多少积分*/private Integer bonus;}

创建消息监听类:

@Service@RocketMQMessageListener(consumerGroup= "consumer-group",topic= "add-bonus")public class AddBonusListener implements RocketMQListener<UserAddBonusMsgDTO>{@Overridepublic void onMessage(UserAddBonusMsgDTO message){System.out.println(message.getUserId())System.out.println(message.getBonus())}}

注意:consumerGroup在生产者中是写到配置文件中的,在消费者中是在此处进行指定的。topic在生产者中是发送消息的时候添加,在此处是接收监听类的时候指定,这两个都必须带上;

官方文档中对各类MQ的使用方法总结消费者各个MQ的注解简单总结: RocketMQ: RocketMQMessageListenerActiveMQ/Artemis:JmsListenerRabbitMQ: RabbitListenerKafka: KafkaListener

9.11 分布式事务01

以前解决事务的办法: @Transactional(rollbackFor= Exception.class) 当发现了Exception异常,就进行回滚存在的问题: 图示:

问题概述:当我们的逻辑代码中,不仅仅对数据库做了处理,一些场景下我们需要同时进行消息发送和与MySQL进行交互的功能;此图中,我们首先进行了消息发送,然后再把消息写入缓存,那么就会导致: 如果写入缓存的时候,代码执行失败,回滚操作只能回滚数据库,消息已经被消费者监听到了并做了处理了。 RocketMQ实现事务的流程:

简单来说RocketMQ实现分布式事务的原理是: 执行到应该发送消息的时候,它并未发送,而是处于“准备发送”阶段,当所有的代码都已执行完毕且无异常时,则进行完全发送,此刻消息消费者才能监听到消息;

概念术语解答: 半消息(Half(Prepare) Message) 暂时无法消费的消息。生产者将消息发送到了MQ server,但这个消息会被标记为“暂不能投递”状态,先存储起来;消费者不会去消费这条消息 消息回查(Message Status Check) 网络断开或生产者重启可能会导致丢失事务消息的第二次确认。当MQ Server发现消息长时间处于半消息状态时,将向消息生产者发送请求,询问该消息的最终状态(提交或回滚) 消息三态: Commit:提交事务消息,消费者可以消费此消息Rollback: 回滚事务消息,broker会删除该消息,消费者不能消费UNKNOWN: broker需要回查确认该消息的状态

9.12 分布式事务02- 编码

到数据库中新增一张表,用来记录 RocketMQ的事务日志:

执行代码:

create table rocketmq_transaction_log(id int auto_increment comment 'id' primary key, transaction_Id varchar(45) not null comment '事务id',log varchar(45) not null comment '日志')

消息生产者编写:发送半消息:

// 首先可以判断,当前面代码执行成功后再执行此代码,此处略// 发送半消息String transactionId=UUID.randomUUID().toString()this.rocketMQTemplate.sendMessageInTransaction("tx-add-bonus-group","add-bonus",MessageBuilder.withPayload(UserAddBonusMsgDTO.builder().userId(share.getUserId).bonus(50).build()).setHeader(RocketMQHeaders.TRANSACTION_ID,transactionId).setHeader("share_id",id).build(),auditDTO)

此处 “tx-add-bonus-group”,“add-bonus” 组名及topic是由自己指定的,可根据实际改变。auditDTO、share_id是根据业务需要所传入的数据,auditDTO在消息监听类中可以直接强转使用,share_id的数据可以直接从请求头中获取;

消息消费者编写:

@RocketMQTransactionListener(txProducerGroup = "tx-add-bonus-group")@RequiredArgsConstructor(onConstructor = @_(@Autowired))public class AddBonusTransactionListener implements RocketMQLocalTransactionListener{@Overridepublic RocketMQLocalTransactionState executeLocalTransaction(Message msg, Object arg)String transactionId(String)headers.get(RocketMQHeaders.TRANSACTION_ID);Integer shareId= Integer.valueOf((String)headers.get("share_id"))try{this.shareService.auditByIdInDB(shareId,(ShareAuditDTO) arg)return MIT;}catch(Exception e){return RocketMQLocalTransactionState.ROLLBACK;}}// 编写回查代码,当我们@Overridepublic RocketMQLocalTransactionState checkLocalTransaction(Message msg){return null;}}

当我们执行成功,则执行MIT,失败则ROLLBACK。但是有这样一种情况,比如我们已经执行完逻辑代码,正准备COMMIT提交,此时突然停电了,导致数据已经存入,但是却没有提交成功。所以我们需要一个回查方法,checkLocalTransaction()是一个回查方法,它会去里面进行判断是否执行成功。结合我们已经建立的RocketMQ事务表,我们可以进行回查操作,代码看下方:

// auditByInDB具体方法内容如图所示:

新建一个存入方法,我们之前的存入方法,没有将事务数据加入日志表,我们可以这样改造: 当数据存入的时候,将数据存入日志表;回查方法就进行回查,如果没有存入则表示执行失败:

@Autowiredprivate RocketmqTransactionLogMapepr rocketmqTransactionLogMapepr;@Transactional(rollbackFor= Exception.class)public void auditByIdWithRocketMqLog(Integer id, ShareAuditDTO auditDTO, String transactionId){this.auditByIdInDB(id,auditDTO);this.rocketmqTransactionLogMapper.insertSelective(RocketmqTransactionLog.builder().transactionId(transactionId).log("审核分享").build());}

消息消费者重写:

@Autowiredprivate ShareService shareService;@Autowiredpriavte RocketmqTransactionLogMapper rocketmqTransactionLogMapper;@RocketMQTransactionListener(txProducerGroup = "tx-add-bonus-group")@RequiredArgsConstructor(onConstructor = @_(@Autowired))public class AddBonusTransactionListener implements RocketMQLocalTransactionListener{@Overridepublic RocketMQLocalTransactionState executeLocalTransaction(Message msg, Object arg)String transactionId(String)headers.get(RocketMQHeaders.TRANSACTION_ID);Integer shareId= Integer.valueOf((String)headers.get("share_id"))try{this.shareService.auditByIdWIthRocketMqLog(shareId,(ShareAuditDTO) arg,transactionId)return MIT;}catch(Exception e){return RocketMQLocalTransactionState.ROLLBACK;}}// 编写回查代码,当我们@Overridepublic RocketMQLocalTransactionState checkLocalTransaction(Message msg){MessageHeaders headers= msg.getHeaders();String transactionId= (String) headers.get(RocketMQHeaders.TRANSACTION_ID);// 查询是否存了事务数据this.rocketmqTransactionLogMapper.selectOne(RocketmqTransactionLog.builder().transactionId(transactionId).build());// 判断是否提交if(transactionLog != null){return MIT;}return RocketMQLocalTransactionState.ROLLBACK;}}

使用header和arg可以传参

9.13 Spring Cloud Stream 是什么?

是一个用于构建消息驱动的微服务的框架架构:

9.14 Spring Cloud Stream 编程模型

概念: Destination Binder(目标绑定器) 与消息中间件通信的组件 Destination Bindings(目标绑定) Binding是连接应用程序跟消息中间件的桥梁,用于消息的消费和生产,由binder创建 Message(消息) 编程模型图:

当消息生产者使用Kafka发送消息,那只能用Kafka来接收消息。当使用SpringCloudStream来处理消息的话,我们接收Kafka的消息,可以使用其他的消息中间件来进行接收。SpringCloudStream对消息进行了一层封装,所以我们不需要去关心生产者用的是什么消息中间件。

9.15 Spring Cloud Stream 代码-消息生产者

编写生产者: 添加依赖:

<dependency><groupId>org.springframework.cloud</groupId><artifactId>spring-cloud-starter-stream-rocketmq</artifactId></dependency>

添加注解(在启动类上添加注解): 添加@EnableBing(Source.class)注解,如图所示:

写配置(application.yml):

spring:cloud:stream:rocketmq:binder:name-server: 127.0.0.1:9876bindings:output:# 用来指定topicdestination: stream-test-topic

生产者发送消息:

@GetMapping("test-stream")public String testStream(){this.source.output().send(MessageBuilder.withPayload("消息体").build());return "success";}

检查是否成功发送。 在控制台中我们可以查看此组下是否有已发送过的消息:

如果控制台在一直打印日志的话,我们可以降低日志级别:

9.16 Spring Cloud Stream 消息消费者

编写消费者: 添加依赖:

<dependency><groupId>org.springframework.cloud</groupId><artifactId>spring-cloud-starter-stream-rocketmq</artifactId></dependency>

添加注解(在启动类上添加注解):@EnableBinding(Sink.class)

写配置(application.yml):

spring:cloud:stream:rocketmq:binder:name-server: 127.0.0.1:9876bindings:input:destination: stream-test-topicgroup: binder-group # 这里的group 一定要设置; 如果使用的不是rocketmq的话,这里可以不用设置,可以留空

监听消费类:

@Service@Slf4jpublic class TestStreamConsumer{@StreamListener(Sink.INPUT)public void receive(String messageBody){log.info("通过stream收到了消息: messageBody = {}");}}

9.17 Spring Cloud Stream 接口自定义:消息生产者

接口:

public interface MySource{String MY_OUTPUT= "my-output";@Output(MY_OUTPUT)MessageChannel output();}

启动类上,**@EnableBinding注解上引入 MySource.class,如图所示:

加配置:

定义接口,发送消息:

使用自定义的接口我们可以进行消息的收发;

9.18 Spring Cloud Stream 接口自定义:消息消费者

创建方法:

启动类中引入:

配置类修改:

使用自定义接口:消息消费监听,如图所示:

9.19 消息过滤

手记

9.20 Spring Cloud Stream 的监控

Spring Cloud Actuator为我们提供了三个端点来监控Stream: /actuator/bindings/actuator/channels/actuator/health

9.21 Spring Cloud Stream 异常处理

错误处理手记定义全局异常处理的办法如下:

@StreamListener("errorChannel")public void error(Message<?> message){ErrorMessage errorMessage= (ErrorMessage) message;log.warn("发生异常,errorMessage = {}",errorMessage);}

9.22 Spring Cloud Stream + RocketMQ实现分布式事务

SpringCloud Stream 本身没有实现分布式事务,它与RocketMQ结合则是使用RocketMQ的分布式事务。它若与其他结合,则使用其他消息中间件的分布式事务。Spring Cloud Stream 的分布式事务改造如图:

发送者从rocketRestTemplate改为source:

在配置文件中定义组合事务:

消息的监听定义组名称时,一定要与配置文件中的保持一致,如图所示:

十. Spring Cloud Gateway

10.1 为什么要使用网关

在不使用Gateway的情况下,当我们直接与微服务通信的情况下,需要每个服务都进行网关登录验证,同时需要解决各个服务的登录状态的同步等功能;使用Gateway可以对外暴露一个域名,微服务无论增加多少,都只需要指向一个网关即可,它可以统一对外进行登录、校验、授权、以及一些拦截操作;

10.2 Spring Cloud Gateway 是什么?

它是SpringCloud的网关(第二代),未来会取代Zuul(第一代)基于Netty、Reactor以及WebFlux构建(所以它启动会比其他微服务一般要快)它的优点: 性能强劲: 它的性能是第一代网关Zuul 1.x的1.6倍! 性能PK功能强大:内置了很多实用功能,比如转发、监控、限流等设计优雅、易扩展 它的缺点: 依赖Netty与Webflux,不是Servlet编程模型,有一定适应成本不能在Servlet容器下工作,也不能构建成WAR包不支持Spring Boot 1.x

10.3 编写Spring Cloud Gateway

创建项目 gateway,此处省略

pom.xml:

父工程依赖:

定义SpringCloud版本、gateway依赖:

SpringCloudAlibaba等引入:

加入Nacos、Actuator依赖:

application.yml配置:

配置端口及nacos、gateway配置:

配置Actuator相关配置:

启动gateway

gateway是基于Netty,所以启动速度非常快。从上面就已经可以进行服务转发了,因为gateway:discovery:locator:enabled:true 可以自动让服务转发到对应的路径去;

转发规律:访问${GATEWAY_URL}/{微服务X}/路径 会转发到微服务X的/路径

10.4 核心概念

Route(路由): Spring Cloud Gateway 的基础元素,可简单理解成一条转发的规则。包含:ID、目标URL、Predicate集合以及Filter集合。 Predicate(谓词):即 java.util.function.Predicate,Spring Cloud Gateway 使用Predicate实现路由的匹配条件Filter(过滤器): 修改请求以及响应路由配置示例:

10.5 架构剖析

架构图:

源码:

10.6 内置路由谓词工厂详解(Route Predicate Factories)

工厂图示:

谓词工厂手记

10.7 自定义路由谓词工厂

自定义路由谓词工厂类必须以PredicateFactory结尾命名大致步骤: 继承 AbstractRoutePredicateFactory<自定义配置对象>添加构造方法重写抽象方法配置中添加配置规则

10.8 内置过滤器工厂详解

手记:总结了全部的内置过滤器工厂

10.9 自定义过滤器工厂

内容介绍: 过滤器生命周期自定义过滤器工厂的方式核心API编写一个过滤器工厂 过滤器生命周期: pre: Gateway 转发请求之前post: Gateway 转发请求之后 自定义过滤器工厂- 方式1: 继承和参考示例:

配置形式:

自定义过滤器工厂-方式2:

自定义过滤器工厂-核心API

这些过滤器工厂的核心Api比较简单,从名称就可以看出其含义;

编写一个过滤器工程:

创建一个类: PreLogGatewayFilterFactory:

最后在过滤器工厂上面加上 @Component 注解

在配置中新增内容,并修改工厂类,打印配置中新增的数据:

配置文件中,传入了ab两个配置值,在我们工厂类中可以通过config.getName,config.getValue获取到;当有请求访问经过此过滤器工厂时,日志就会打印出来了;

10.10 全局过滤器

会作用在所有的路由,有执行顺序的概念,order越小越靠前执行;手记笔记

10.11 悬念:如何为Spring Cloud Gateway 整合Sentinel?

gateway整合hystrix

sentinel要在1.6 版本以后才支持gateway

10.12 监控SpringCloud gateway

SpringCloud Gateway监控

10.13 排错、调试技巧总结

Spring cloud Gateway排查问题总结

10.14 进阶:再谈过滤器执行顺序

结论: order越小越靠前执行过滤器工厂的Order按配置顺序从1开始递增如果配置了默认过滤器,则线执行相同Order的默认过滤器

相同顺序的,以default-filter中的优先

如需自行控制Order,可返回OrderedGatewayFilter

源码:

10.15 Spring Cloud Gateway限流

SpringCloud gateway限流手记

10.16 本章总结

路由、路由谓词工厂、过滤器工厂、全局过滤器网关集大成: 注册到Nacos集成Ribbon容错(默认Hystrix,也可用Sentinel)

十一. 微服务的用户认证与授权

11.1 认证授权-必然会面临的话题

每个应用基本上都需要进行登录,校验用户权限

11.2 有状态vs 无状态

有状态: 图示:

优点:服务端控制力强缺点:存在中心点,鸡蛋放在一个篮子里,迁移麻烦,服务器端存储数据,加大了服务器端压力 无状态: 图示:

优点:去中心话,无存储,简单,任意扩容、缩容缺点:服务器端控制力相对弱(不能随时强制让人下线,修改登录时长等)

11.3 微服务认证方案 01 “处处安全”

关于处处安全的博客常用的协议为: OAuth2.0,系列文章代表实现: Spring Cloud Security,实例代码Jboss Keycloak, 示例代码

看好Keyclock,但是它不支持CLoud,它是Servlet模型的,无法与Gateway配合使用;

优点: 安全性高 缺点: 实现成本高,性能要低一些

11.4 微服务认证方案 02 - 外部无状态,内部有状态方案

图示:

它能够与老架构项目相兼容。就是老项目可能没有Token,但是可以从Session中获取信息。

它安全性和性能都不占优势,但它的优点是能够与老项目服务相兼容

11.5 微服务认证方案 03 - 网关认证授权、内部裸奔方案

图示:

安全性低,性能高

11.6 微服务认证方案 04 内部裸奔改进方案

图示:

每个服务都能够对Token进行解析,每个服务就不会裸奔了,但是每个服务都知道Token解密方式,容易暴露;

11.7 微服务认证方案 05 方案对比

对比图示:

11.8 访问控制模型

模型如图:

RBAC:

11.9 JWT是什么?【是什么、组成】

JWT全称Json web token,是一个开放标准(RFC 7519),用来在各方之间安全地传输信息。JWT可被验证和信任,因为它是数字签名的。JWT组成图示:

公式:

JWT的手记

11.10 AOP实现登录状态检查

实现登录状态检查的方式:

建议使用SpringAop 来实现,这样解耦且灵活

手动实现切面: 定义注解:

定义切面:

定义异常捕获类:

11.11 Feign实现Token传递

Controller层可以接收Token:

Feign中可以携带Token:

上面的这种方式携带Token,需要每个都进行配置,比较麻烦。当我们Feign调用的接口比较多的时候,我们可以使用拦截器统一携带Token:

使用全局配置的时候,需要在配置中添加如图配置:

11.12 RestTemplate实现Token传递

两种方式,分别是exchange()ClientHttpRequestInterceptorexchange()代码示例:

使用RestTemplate拦截器示例: 拦截器配置:

RestTemplate配置:

11.13 Java 自定义注解

java 自定义注解手记

11.15 本章总结

十二. 配置管理

12.1 为什么要实现配置管理?

不同环境存在不同的配置配置属性要求动态刷新,不重启

使用Nacos就可以作为一个配置服务器,实现上面两个功能;

12.2 使用Nacos管理配置

添加依赖:

<dependency><groupId>org.springframework.cloud</groupId><artifactId>spring-cloud-starter-alibaba-nacos-config</artifactId></dependency>

写配置:- 配置内的内容与Nacos中的配置必须保持一致,一定要记住这张图:

建立bootstrap.yml:

spirngconfig与Nacos的配置是分开来的。config的配置建议放在bootstrap.yml中,否则可能不生效,应用无法读取配置;

代码中写入配置:

在Nacos中建立配置:

配置好内容后点击发布即可。

重启应用,调用接口,发现参数能获取到,完成!

12.3 配置属性动态刷新与回滚

在需要属性动态刷新的类上写上注解@RefreshScope,即可动态刷新配置,如图所示:

当我们将itmuch改为,调用接口时,会自动刷新:

回滚:

12.4 应用的配置共享

配置共享:

shared-dataids:

方式2: ext-config:

方式3: 自动的方式:

这个自动方式就是里面的内容是所有环境的公共配置数据,profiles.active指向的环境可以放置其存在变化的配置;

优先级:

12.5 引导上下文

默认远程配置优先级更高,我们可以使用下方代码进行配置优先级:

远程配置优先级必须要在Nacos下配置才生效,如图所示:

12.6 数据持久化

服务发现组件是放在文件夹内。配置数据是放在嵌入式数据库中(生产环境建议更换为mysql);

12.7 搭建生产可用的Nacos集群

搭建生产可用的nacos集群

12.8 配置最佳实践总结

能放本地的情况下,就不要放在远程尽量规避优先级,简化配置定规范,例如所有配置属性都要加上注释配置管理人员尽量少(Nacos的安全权限功能还未齐全,为了安全高效管理着想,人员尽量少)

十三. 调用链监控-Sleuth

13.1 调用链监控

使用调用链监控,我们能够清晰的看出来这个接口调用了哪些方法,哪些方法消耗了多少时间,同时如果出现了问题,是哪个方法出现了问题,我们也能够快速定位业界主流的调用链监控工具 Spring Cloud Sleuth+ZipkinSkywalking、Pinpoint

13.2 整合Sleuth

什么是Sleuth? Sleuth是一个Spring Cloud的分布式跟踪解决方案 Sleuth术语? Span(跨度): Sleuth的基本工作单元,它用一个64位的id唯一标识。除ID外,span还包含其他数据,例如描述、时间戳事件、键值对的注解(标签)、span ID、span 父ID等

里面每一行数据,可以理解为一个span

trace(跟踪): 一组span组成的树状结构成为traceAnnotation(标注): CS(Client Sent 客户端发送):客户端发起一个请求,该annotation描述了span的开始SR(Serverr Received 服务器端的接收): 服务器端获得请求并准备处理它SS(Server Sent服务器端发送): 该annotation表明完成请求处理(当响应发回客户端时)CR(Client Received客户端接收):span结束的标识。客户端成功接收到服务器端的响应 为用户中心整合Sleuth: 加依赖

<dependency><groupId>org.springframework.cloud</groupId><artifactId>spring-cloud-starter-sleuth</artifactId></dependency>

修改日志级别(可打印更多的日志,可选项)

13.3 Zipkin搭建与整合

Zipkin是什么? Zipkin是Twitter开源的分布式跟踪系统,主要用来收集系统的时序数据,从而追踪系统的调用问题Zipkin通俗来讲,它就是将sleuth收集来的数据进行存储、展示的,它的可视化界面能够更友好的,更清晰的为我们提供决策; 搭建Zipkin Server (本文章版本为:2.12.9) 方式一:使用Zipkin官方的Shell下载,如下命令可下载最新版本:

curl -sSL https://zipkin.io/quickstart.sh | bash -s

方式二: 到Maven中央仓库下载,访问如下地址即可:

/remote_content?g=io.zipkin.java&a=zipkin-server&v=1

下载下来的文件名为: zipkin-server-2.12.9-exec.jar

方式三:使用百度盘地址下载,提供2.12.9版本:

/s/1HXjzNDpzin6fXGrZPyQeWQ

密码:aon2

启动Zipkin,执行如图所示命令:java -jar zipkin-server-2.12.9-exec.jar

为用户中心整合Sleuth+Zipkin: 加依赖:去掉Sleuth,加上zipkin依赖(去掉sleuth是因为zipkin中有sleuth的依赖) Gradle:

compile group: 'org.springframework.cloud', name: 'spring-cloud-sleuth-zipkin', version: '2.2.3.RELEASE'

Maven:

<dependency><groupId>org.springframework.cloud</groupId><artifactId>spring-cloud-sleuth-zipkin</artifactId><version>2.2.3.RELEASE</version></dependency>

加配置:设置zipkin服务器地址以及抽样率,如图所示:

抽样率不是越高越好,也不是越低越好。抽样率高的话,分析的更加准确,但是它的性能消耗会更严重;

13.4 整合Zipkin之后Nacos报错的解决

SpringCloud 把http://localhost:9411/当做了服务发现组件里面的服务名称;于是,Nacos Client尝试从Nacos Server寻找一个名为:localhost:9411的服务…这个服务根本不存在,所以会一直报异常;解决方案: 方案一: 让Spring Cloud 正确识别 http://localhost:9411/当成一个URL,而不要当做服务名(选择此项目)方案二: 把Zipkin Server注册到Nacos(官方不支持) 以方案一的方式解决,需要将discoveryClientEnabled: false,如图所示:

这里的小驼峰命名是因为有一个小bug,后面会修复就以 - 隔开

13.5 为所有微服务整合Zipkin

参照13.5的引入方式;

13.6 Zipkin数据持久化

持久化方式:

MySQL(不建议,有性能问题)ElasticsearchCassandra相关文档: (/openzipkin/zipkin#storage-component)[/openzipkin/zipkin#storage-component]

下载ElasticSearch:( 建议使用5,6,7版本)

点击地址进行下载:(官网地址)[elastic.co/cn/downloads/past-releases#elasticsearch]

解压并进入目录:

切换到bin目录,并执行:./elasticsearch或后台执行./elasticsearch -d查看Zipkin的环境变量,配置STORAGE_TYPEES_HOSTS,然后执行zipkin server服务:

Zipkin其他环境变量:/openzipkin/zipkin/tree/master/zipkin-server#environment-variables

13.7 依赖关系图

使用ElasticSearch的话,需要使用spark job才能分析出依赖关系图,使用方式如下:

它是zipkin的子项目,第一步下载,第二步启动

Zipkin Dependencies使用ElasticSearch的环境变量:

启动Zipkin Dependencies:

Zipkin Denpendencies其他的环境变量:(/openzipkin/zipkin-dependencies)[/openzipkin/zipkin-dependencies]Zipkin Dependencies指定分析日期:

可以编写脚本每日执行;

十四. 既有代码优化与改善

14.1 简单指标: Statistic

注释原则: 每一步主要业务流程核心方法条件、分支、判断前 使用Statistic插件:

建议服务上线,注释率要求达到35%

14.3 Alibaba Java代码规约(P3c)

githubIDEA插件支持,搜索Alibaba Java Coding Guidelines

14.4 SonarQube

教程下载:jdk8只支持6.x~7.8.x 的版本安装:查看日志命令:

tail -f ../../logs/sonar.log

访问首页:localhost:9000/about账号密码都是admin根据手记我们与项目融合,建议使用Token,命令行的方式去融合。融合后我们可以很方便的看到程序有多少个bug,哪里的代码不够优雅等信息:

它还有很多插件,比如汉化插件、其他监控插件等:

内嵌数据库不方便伸缩,所以不适用于生产环境,所以建议更换为MySql之类的数据库

十五. 进阶:多维度微服务监控

1.51 本章概要

Spring Boot Actutator: 监控微服务实例的情况Sentinel Dashboard: 监控实例的QPS、限流等Spring Cloud Sleuth+Zipkin: 监控服务的调用情况

15.2 Spring Boot Actuator监控数据库

SpringBoot Admin:

它是为Spring Boot 量身打造的一个简单易用的监控数据管理工具(GitHub地址)[/codecentric/spring-boot-admin](官方文档)[http://codecentric.github.io/spring-boot-admin/2.1.6/]

搭建SpringBoot admin 步骤:

加依赖: 整合版本,如图所示:

加入SpringBootAdmin以及Nacos,将Admin注册到Nacos上,如图所示:

写注解: 在启动类上添加@EnableAdminServer注解,如图所示:

加配置: 在application.yml中进行配置:

被监控的服务的步骤:

加依赖:

<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-actuator</artifactId></dependency>

加配置:

15.3 JVM监控

Spring Boot Actuator: metrics、heapdump、threaddumpJava自带的JVM监控工具: jconsole、jvisualvm自带工具打开方式: jconsole: 在IDEA或者CMD中输入 jconsole,如图所示:

jvisualvm: 与jconsole类似,输入jvisualvm即可,如图所示:

jvisualvm与jconsole类似,但是它的功能更强大一点,但是它们都是客户端形式,希望能出一款强大的web浏览形式的监控工具;

15.4 GC日志、线程Dump日志、堆Dump可视化分析

第一步,启动参数中设置打印GC详情日志:

第二步,选择项目,右击选择Synchronize 'xxxx',生成出gc.log,如图所示:

找到输出的日志文件,右键后选择Reveal in Finder,将文件导出:

将生成的文件在gceasy.io中,点击选择文件打开,然后会生成统计图表

生成统计图表如图:

虽然这款工具很强大,但是它不是开源产品,我们可以使用如图产品替代,但是可能相比来说要功能缺失一些:

15.5 日志监控

ELK架构如图所示:

对日志监控的工具可以不做强制要求,只要合适就行,不一定得必须要ELK

15.6 其他监控

监控的时候,应该要全面一点,比如用到了docker,我们应该就要监控docker。用到了Linux服务器,我们就应该要监控服务器的运行情况。用到了RabbitMQ,我们也应该去监控rabbitmq。只有当监控完善的时候,我们分析问题就能更加的全面。

十六. 进阶:完美融合异构微服务

17.1 如何完美整合异构微服务

非SpringCloud的服务,就叫做异构微服务完美整合: SpringCloud 微服务完美调用异构微服务异构微服务完美嗲用SpringCloud微服务 完美调用:互相之间需要满足如下: 服务发现负载均衡容错处理

17.2 Spring Cloud Wii实现完美整合

使用SpringCloud Wii完美整合Github地址部分配置如图所示,参照上方的教程配置即可

它未来是SpringCloudAlibaba的一个子项目

十八.课程总结:

SpringCloud是一系列的工具集,SpringCloudAlibaba是一站式解决方案知其然而不知其所以然是不可取的,我们更要知道去知道核心原理,这样就算是Eureka、Nacos、或者别的服务发现或者其他组件,我们都能很快的上手;

本内容不代表本网观点和政治立场,如有侵犯你的权益请联系我们处理。
网友评论
网友评论仅供其表达个人看法,并不表明网站立场。