互联网公司常用分库分表方案汇总!再不了解你就out啦

Posted Java德克士

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了互联网公司常用分库分表方案汇总!再不了解你就out啦相关的知识,希望对你有一定的参考价值。

前言

本系列的目的是明明白白、彻彻底底的搞定日期/时间处理的几乎所有case。上篇文章铺设所有涉及到的概念解释,例如GMT、UTC、夏令时、时间戳等等,若你还没看过,不仅强烈建议而是强制建议你前往用花5分钟看一下,因为日期时间处理较为特殊,实战必须基于对概念的了解,否则很可能依旧雾里看花。

说明:日期/时间的处理是日常开发非常常见的老大难,究其原因就是对日期时间的相关概念、应用场景不熟悉,所以不要忽视它

本文落地实操,二者相辅相成,缺一不可。本文内容较多,文字较长,预计超2w字,旨在全面的彻底帮你搞定Java对日期时间的处理,建议你可收藏,作为参考书留以备用。

本文提纲

微服务架构

第1章 微服务概述

  • 什么是微服务
  • 常见的微服务组件
  • 常用的微服务框架
  • 微服务架构设计模式
  • 如何实施微服务

从微服务的起源和现实业务的角度探讨微服务

Github标星67.9k的微服务架构以及架构设计模式笔记我粉了

第2章 微服务设计原则

  • 设计原则之分层架构
  • 设计原则之统一通信协议
  • 设计原则之单一职责
  • 设计原则之服务拆分
  • 设计原则之前后端分离
  • 设计原则之版本控制
  • 设计原则之围绕业务构建
  • 设计原则之并发流量控制
  • 设计原则之CAP
  • 设计原则之EDA事件驱动
  • 设计原则之CQRS
  • 设计原则之基础设施自动
  • 设计原则之 数据一致性
  • 设计原则之设计模式
  • 设计原则之DevOps
  • 设计原则之无状态服务

针对微服务的设计理念进行整理,包括服务如何拆分、前后端分离、CAP理论和CQRS等,是一个高层次的指导原则。

Github标星67.9k的微服务架构以及架构设计模式笔记我粉了

第3章 微服务之Spring Boot

  • 一切从简单开始
  • 快速集成第三方的Starter
  • 降低开发复杂度之面向切面
  • 并不复 杂的持久化.
  • Web开发
  • 懒人的接口文档管理.
  • 优化的调度
  • 健康是永恒的主题
  • 强强联合之整合Dubbo

详细地介绍SpringBoot的开发,包括使用它的优缺点,以及在企业级开发中常用的工具包的整合,包括面向切面编程、Web开发、文档管理和调度管理,最后结合Dubbo完成一个示例性的分布式工程。

第4章 微服务之Docker

  • Docker原理
  • 更轻量级的虚拟化
  • 三个概念理解Docker
  • Dockerfile定制一切
  • Docker网络
  • Docker 数据卷
  • Spring Boot与Docker
  • 搭建自己的镜像仓库
  • Kubernetes
  • 私有云整体架构

主要讲解Docker的基础操作,介绍微服务中所用到的容器相关的技术,最后给出通用的基于容器的私有云架构。

Github标星67.9k的微服务架构以及架构设计模式笔记我粉了

第5章 微服务之Spring Cloud

  • 注册中心
  • 负载均衡
  • 微服务容错 (Hystrix)
  • 分布式配置中心
  • API 网关
  • 消息总线(Spring Cloud Bus)

对SpringCloud实现微服务的几个重要框架进行展开描述,让读者了解注册中心、负载均衡、容错、分布式配置、网关和消息总线,能够完成开发层面的微服务架构。

Github标星67.9k的微服务架构以及架构设计模式笔记我粉了

第6章 微服务之Spring Cloud其他框架

  • Spring Cloud Consul
  • Spring Cloud ZooKeeper
  • Spring Cloud archaius
  • Spring Cloud Task
  • Spring Cloud Security
  • Spring Cloud Sleuth
  • Spring Cloud Stream
  • Spring Cloud Data Flow

对Spring Cloud的非核心框架进行介绍,包括Consul、ZooKeeper、安全框架和数据流框架。

第7章 微服务之自动化测试与质量管理

  • 微服务测试
  • 单元测试
  • API测试
  • A/B测试
  • 冒烟和回归测试
  • 静态代码分析
  • SonarQube 质量监控

主要对测试和质量管理进行介绍,测试部分包括单元测试、A/B 测试、冒烟和回归测试,质量管理部分主要使用静态代码分析,并且基于SonarQube对代码进行静态检查,以及分析代码的总体质量。

第8章 微服务之JHipster

  • JHipster技术列表
  • Angular简介
  • 快速开始JHipster
  • 目录结构
  • 构建微服务应用
  • 基础配置

对微服务的最佳实践JHipster进行系统的介绍,并且对JHipster 部分内容做了处理,还将在国内不是很流行的部分进行了处理,尽可能详细地介绍JHipster的应用和配置。

Github标星67.9k的微服务架构以及架构设计模式笔记我粉了

第9章 微服务之自动化部署

  • 私有仓库搭建
  • Ansible
  • 持续集成
  • 灰度发布

主要对自动化部署进行介绍,因为微服务的目的不仅仅是简化开发,而且能够提高整个团队的运行效率。所以私服的使用和自动化运维就显得非常重要。

Github标星67.9k的微服务架构以及架构设计模式笔记我粉了

第10章 微服务之日志收集与监控

  • ELK搜集与分析
  • 系统监控
  • 运维监控
  • APM监控
  • Pinpoint 的安装与使用

主要讲解日志收集和APM监控,对于线上系统来说,出现问题的概率还是非常大的,如何快速定位并第一时间找到问题所在的点就显得非常重要。APM部分对常用的监控工具进行列举,重点介绍Pinpoint,对使用和邮件告警也进行了重点介绍。

Github标星67.9k的微服务架构以及架构设计模式笔记我粉了

第11章 完整示例

  • 安装 Lombok
  • PiggyMetrics
  • 整体架构
  • 安装和运行

通过对PiggyMtrics的全面讲解,让读者能够了解一个简单的微服务架构所包含的技术点和构建原则,并且实际部署微服务,完成业务的基础操作。

Github标星67.9k的微服务架构以及架构设计模式笔记我粉了

第12章 微服务核心功能推荐

  • 工作流引擎
  • 规则引擎
  • 调度系统
  • 消息推送
  • 网关中间件
  • 分库分表中间件
  • 报表引擎
  • 数据处理
  • 并发编程
  • 分布式配置
  • CAS
  • WebFlux

对在微服务构建过程中可能涉及的技术点进行讲解,包括工作流引擎、规则引擎、调度系统、分布式配置及单点登录。

Github标星67.9k的微服务架构以及架构设计模式笔记我粉了

这份实战文档从微服务的思想基础、设计原则,延伸到Spring Boot. Docker. Spring Cloud及其他框架的介绍,不仅涉及微服务的自动化测试与质量管理、自动化部署、日志收集与监控,还提供完整的实战示例。全书清晰、透彻地剖析了微服务的整个生态,有助于大家快速提升对微服务的认知,构建自己的架构体系。

微服务架构设计模式

这份文档围绕微服务的架构设计,深入浅出地介绍了微服务与SOA等其他架构的区别,软件系统服务的拆分策略,微服务的同步和异步通信模式,如何使用微服务进行事务管理,如何在微服务架构中设计业务逻辑。同时详细描述了微服务架构中的测试和生产部署策略。对设计微服务架构有很好的指导作用。

由于篇幅限制就不细细展开文档内容了,这份文档总共有13个章节

  • 第1章 逃离单体地狱

Github标星67.9k的微服务架构以及架构设计模式笔记我粉了

  • 第2章 服务的拆分策略
  • 第3章 微服务架构中的进程间通信

Github标星67.9k的微服务架构以及架构设计模式笔记我粉了

  • 第4章 使用Saga管理事务
  • 第5章 微服务架构中的业务逻辑设计

Github标星67.9k的微服务架构以及架构设计模式笔记我粉了

  • 第6章 使用事件溯源开发业务逻辑
  • 第7章 在微服务架构中实现查询

Github标星67.9k的微服务架构以及架构设计模式笔记我粉了

  • 第8章 外部API模式

Github标星67.9k的微服务架构以及架构设计模式笔记我粉了

  • 第9章 微服务架构中的测试策略(上)

Github标星67.9k的微服务架构以及架构设计模式笔记我粉了

  • 第10章 微服务架构中的测试策略(下)
  • 第11章 开发面向生产环境的微服务应用

Github标星67.9k的微服务架构以及架构设计模式笔记我粉了

  • 第12章 部署微服务应用
  • 第13章 微服务架构的重构策略

Github标星67.9k的微服务架构以及架构设计模式笔记我粉了

Spring全套教学资料

Spring是Java程序员的《葵花宝典》,其中提供的各种大招,能简化我们的开发,大大提升开发效率!目前99%的公司使用了Spring,大家可以去各大招聘网站看一下,Spring算是必备技能,所以一定要掌握。

资料领取方式:点击这里前往蓝色传送门

目录:

部分内容:

Spring源码

  • 第一部分 Spring 概述
  • 第二部分 核心思想
  • 第三部分 手写实现 IoC 和 AOP(自定义Spring框架)
  • 第四部分 Spring IOC 高级应用
    基础特性
    高级特性
  • 第五部分 Spring IOC源码深度剖析
    设计优雅
    设计模式
    注意:原则、方法和技巧
  • 第六部分 Spring AOP 应用
    声明事务控制
  • 第七部分 Spring AOP源码深度剖析
    必要的笔记、必要的图、通俗易懂的语言化解知识难点

脚手框架:SpringBoot技术

它的目标是简化Spring应用和服务的创建、开发与部署,简化了配置文件,使用嵌入式web服务器,含有诸多开箱即用的微服务功能,可以和spring cloud联合部署。

Spring Boot的核心思想是约定大于配置,应用只需要很少的配置即可,简化了应用开发模式。

  • SpringBoot入门
  • 配置文件
  • 日志
  • Web开发
  • Docker
  • SpringBoot与数据访问
  • 启动配置原理
  • 自定义starter

微服务架构:Spring Cloud Alibaba

同 Spring Cloud 一样,Spring Cloud Alibaba 也是一套微服务解决方案,包含开发分布式应用微服务的必需组件,方便开发者通过 Spring Cloud 编程模型轻松使用这些组件来开发分布式应用服务。

  • 微服务架构介绍
  • Spring Cloud Alibaba介绍
  • 微服务环境搭建
  • 服务治理
  • 服务容错
  • 服务网关
  • 链路追踪
  • ZipKin集成及数据持久化
  • 消息驱动
  • 短信服务
  • Nacos Confifig—服务配置
  • Seata—分布式事务
  • Dubbo—rpc通信

Spring MVC

目录:

部分内容:

42BYjPL0-1620706973487)]

[外链图片转存中…(img-OUhxp60Y-1620706973488)]

Spring MVC

目录:

[外链图片转存中…(img-i2CyOWZK-1620706973489)]

[外链图片转存中…(img-r83ahxrD-1620706973490)]

[外链图片转存中…(img-GDzoD6rv-1620706973490)]

部分内容:

[外链图片转存中…(img-AfO193G2-1620706973491)]

[外链图片转存中…(img-TRyy6q34-1620706973492)]

以上是关于互联网公司常用分库分表方案汇总!再不了解你就out啦的主要内容,如果未能解决你的问题,请参考以下文章

MySQL:互联网公司常用分库分表方案汇总

MySQL:互联网公司常用分库分表方案汇总

MySQL:互联网公司常用分库分表方案汇总

MySQL:互联网公司常用分库分表方案汇总!

MySQL:互联网公司常用分库分表方案汇总!

大厂常用 的MySQL 分库分表方案汇总