dubbo入门

Posted reecelin

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了dubbo入门相关的知识,希望对你有一定的参考价值。

Dubbo背景

Dubbo背景和简介 Dubbo开始于电商系统,因此在这里先从电商系统的演变讲起

  1. 单一应用框架(ORM) 当网站流量很小时,只需一个应用,将所有功能如下单支付等都部署在一起,以减少部署节点和成本。 缺点:单一的系统架构,使得在开发过程中,占用的资源越来越多,而且随着流量的增加越来越难以维护 技术图片

  2. 垂直应用框架(MVC) 垂直应用架构解决了单一应用架构所面临的扩容问题,流量能够分散到各个子系统当中,且系统的体积可控,一定程度上降低了开发人员之间协同以及维护的成本,提升了开发效率。 缺点:但是在垂直架构中相同逻辑代码需要不断的复制,不能复用。 技术图片

  3. 分布式应用架构(RPC) 当垂直应用越来越多,应用之间交互不可避免,将核心业务抽取出来,作为独立的服务,逐渐形成稳定的服务中心 技术图片

  4. 流动计算架构(SOA) 随着服务化的进一步发展,服务越来越多,服务之间的调用和依赖关系也越来越复杂,诞生了面向服务的架构体系(SOA),也因此衍生出了一系列相应的技术,如对服务提供、服务调用、连接处理、通信协议、序列化方式、服务发现、服务路由、日志输出等行为进行封装的服务框架

从以上是电商系统的演变可以看出架构演变的过程: 技术图片

  • 单一应用架构

    • 当网站流量很小时,只需一个应用,将所有功能都部署在一起,以减少部署节点和成本。

  • 此时,用于简化增删改查工作量的 数据访问框架(ORM) 是关键。

  • 垂直应用架构

  • 当访问量逐渐增大,单一应用增加机器带来的加速度越来越小,将应用拆成互不相干的几个应用,以提升效率。

  • 此时,用于加速前端页面开发的 Web框架(MVC) 是关键。

  • 分布式服务架构

    • 当垂直应用越来越多,应用之间交互不可避免,将核心业务抽取出来,作为独立的服务,逐渐形成稳定的服务中心,使前端应用能更快速的响应多变的市场需求。

    • 此时,用于提高业务复用及整合的 分布式服务框架(RPC) 是关键。

  • 流动计算架构

    • 当服务越来越多,容量的评估,小服务资源的浪费等问题逐渐显现,此时需增加一个调度中心基于访问压力实时管理集群容量,提高集群利用率。

    • 此时,用于提高机器利用率的 资源调度和治理中心(SOA) 是关键。

在这里插播一条关于RPC的简介: RPC(Remote Procedure Call Protocol):远程过程调用: 两台服务器A、B,分别部署不同的应用a,b。当A服务器想要调用B服务器上应用b提供的函数或方法的时候,由于不在一个内存空间,不能直接调用,需要通过网络来表达调用的语义传达调用的数据。 说白了,就是你在你的机器上写了一个程序,我这边是无法直接调用的,这个时候就出现了一个远程服务调用的概念。 技术图片

RPC是一种通过网络从远程计算机程序上请求服务,而不需要了解底层网络技术的协议。RPC协议假定某些传输协议的存在,如TCP或UDP,为通信程序之间携带信息数据。在OSI网络通信模型中,RPC跨越了传输层和应用层。RPC使得开发包括网络分布式多程序在内的应用程序更加容易。 RPC采用客户机/服务器模式。请求程序就是一个客户机,而服务提供程序就是一个服务器。首先,客户机调用进程发送一个有进程参数的调用信息到服务进程,然后等待应答信息。在服务器端,进程保持睡眠状态直到调用信息到达为止。当一个调用信息到达,服务器获得进程参数,计算结果,发送答复信息,然后等待下一个调用信息,最后,客户端调用进程接收答复信息,获得进程结果,然后调用执行继续进行。

RPC需要解决的问题: (可以稍作了解,详情可查看别的博文)

  • 通讯问题 : 主要是通过在客户端和服务器之间建立TCP连接,远程过程调用的所有交换的数据都在这个连接里传输。连接可以是按需连接,调用结束后就断掉,也可以是长连接,多个远程过程调用共享同一个连接。

  • 寻址问题 : A服务器上的应用怎么告诉底层的RPC框架,如何连接到B服务器(如主机或IP地址)以及特定的端口,方法的名称名称是什么,这样才能完成调用。比如基于Web服务协议栈的RPC,就要提供一个endpoint URI,或者是从UDDI服务上查找。如果是RMI调用的话,还需要一个RMI Registry来注册服务的地址。

  • 序列化 与 反序列化 : 当A服务器上的应用发起远程过程调用时,方法的参数需要通过底层的网络协议如TCP传递到B服务器,由于网络协议是基于二进制的,内存中的参数的值要序列化成二进制的形式,也就是序列化(Serialize)或编组(marshal),通过寻址和传输将序列化的二进制发送给B服务器。 同理,B服务器接收参数要将参数反序列化。B服务器应用调用自己的方法处理后返回的结果也要序列化给A服务器,A服务器接收也要经过反序列化的过程。

###Dubbo是什么 Dubbo:

  • 一款分布式服务框架

  • 高性能和透明化的RPC远程服务调用方案

  • SOA服务治理方案

每天为2千多个服务提供大于30亿次访问量支持,并被广泛应用于阿里巴巴集团的各成员站点以及别的公司的业务中。

###Dubbo架构 技术图片

Provider: 暴露服务的服务提供方。 Consumer: 调用远程服务的服务消费方。 Registry: 服务注册与发现的注册中心。 Monitor: 统计服务的调用次数和调用时间的监控中心。

调用流程 0.服务容器负责启动,加载,运行服务提供者。 1.服务提供者在启动时,向注册中心注册自己提供的服务。 2.服务消费者在启动时,向注册中心订阅自己所需的服务。 3.注册中心返回服务提供者地址列表给消费者,如果有变更,注册中心将基于长连接推送变更数据给消费者。 4.服务消费者,从提供者地址列表中,基于软负载均衡算法,选一台提供者进行调用,如果调用失败,再选另一台调用。 5.服务消费者和提供者,在内存中累计调用次数和调用时间,定时每分钟发送一次统计数据到监控中心

###Dubbo注册中心 对于服务提供方,它需要发布服务,而且由于应用系统的复杂性,服务的数量、类型也不断膨胀; 对于服务消费方,它最关心如何获取到它所需要的服务,而面对复杂的应用系统,需要管理大量的服务调用。 而且,对于服务提供方和服务消费方来说,他们还有可能兼具这两种角色,即既需要提供服务,有需要消费服务。

通过将服务统一管理起来,可以有效地优化内部应用对服务发布/使用的流程和管理。服务注册中心可以通过特定协议来完成服务对外的统一。

Dubbo提供的注册中心有如下几种类型可供选择

  • Multicast注册中心

  • Zookeeper注册中心

  • Redis注册中心

  • Simple注册中心

###Dubbo优缺点 优点:

  1. 透明化的远程方法调用 像调用本地方法一样调用远程方法;只需简单配置,没有任何API侵入。

  2. 软负载均衡及容错机制 可在内网替代nginx lvs等硬件负载均衡器。

  3. 服务注册中心自动注册 & 配置管理 不需要写死服务提供者地址,注册中心基于接口名自动查询提供者ip。 使用类似zookeeper等分布式协调服务作为服务注册中心,可以将绝大部分项目配置移入zookeeper集群。

  4. 服务接口监控与治理 Dubbo-admin与Dubbo-monitor提供了完善的服务接口管理与监控功能,针对不同应用的不同接口,可以进行 多版本,多协议,多注册中心管理。

缺点:

  • 只支持JAVA语言

简单Dubbo入门demo搭建

本次使用Dubbo,Zookeeper,Spring框架进行整合搭建。主要有以下几个步骤:

  • 安装Zookeeper,并启动;

  • 使用IDEA创建maven项目,构建Dubbo+Zookeeper+SpringBoot实现简单Demo;

  • 安装Dubbo-admin,实现监控。

1 Zookeeper介绍与安装

Zookeeper是一个分布式的服务框架,是树型的目录服务的数据存储,能做到集群管理数据 ,这里能很好的作为Dubbo服务的注册中心

Dubbo能与Zookeeper做到集群部署,当提供者出现断电等异常停机时,Zookeeper注册中心能自动删除提供者信息,当提供者重启时,能自动恢复注册数据,以及订阅请求。

安装完成后,进入到bin目录,并且启动zkServer.cmd,这个脚本中会启动一个java进程,如图所示。 (注:需要先启动zookeeper后,后续dubbo demo代码运行才能使用zookeeper注册中心的功能)


技术图片

2 创建maven项目

主要分为三大模块:api:存放公共接口; provider:远程服务提供者;consumer: 远程服务调用者;如图所示:

技术图片

2.1 创建api的maven项目(有独立的pom.xml,用来打包供提供者和消费者使用)。

该maven项目中的pom.xml文件不需要引入其他依赖,如图所示。

技术图片

在项目中定义服务接口:该接口需单独打包,在提供者和消费者共享。

技术图片

2.2** 创建provider的maven项目(有独立的pom.xml,用来打包消费者使用)。

该maven项目的pom.xml文件中需要引入api项目来实现接口,引入spring-boot-starter-dubbo和zkclient来实现服务者的注册和接口的暴露。如图所示:

技术图片

需要注意的是,最好将spring-boot-starter-web中的logging去除,不然会导致日志启动时报错。如图所示:

技术图片

新建一个DemoServiceImpl来实现api中提供的接口,此实现对消费者隐藏:

技术图片

在resources下新建spring文件夹,在其中再新建一个provider.xml文件来配置提供者服务,如图所示:

<?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans"
      xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
      xmlns:dubbo="http://code.alibabatech.com/schema/dubbo"
      xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans.xsd
      http://code.alibabatech.com/schema/dubbo http://code.alibabatech.com/schema/dubbo/dubbo.xsd">
   <dubbo:application name="provider"/>
   <dubbo:registry address="zookeeper://172.22.213.199:2181" username="local" password="redis" />
   <dubbo:protocol name="dubbo"/>
   <bean id="demoService" class="com.vivo.provider.DemoServiceImpl"/>
   <dubbo:service interface="com.vivo.api.DemoService" protocol="dubbo" ref="demoService"/>
   <dubbo:provider delay="-1" timeout="6000" retries="0"/>
</beans>

在resources中新建log4j.properties文件用于记录日志:

###set log levels###
log4j.rootLogger=info, stdout
###output to the console###
log4j.appender.stdout=org.apache.log4j.ConsoleAppender
log4j.appender.stdout.Target=System.out
log4j.appender.stdout.layout=org.apache.log4j.PatternLayout
log4j.appender.stdout.layout.ConversionPattern=[%d{dd/MM/yy HH:mm:ss:SSS z}] %t %5p %c{2}: %m%n

最后在ProviderApplication.java中启动服务:

public class ProviderApplication {

   public static void main(String[] args) throws IOException {
       ClassPathXmlApplicationContext context=new ClassPathXmlApplicationContext("spring/provider.xml");
       context.start();
       System.in.read();
  }
}

控制台输出:

[07/10/19 10:28:59:131 CST] main-EventThread INFO zkclient.ZkClient: zookeeper state changed (SyncConnected)
[07/10/19 10:28:59:132 CST] main INFO zookeeper.ZookeeperRegistry: [DUBBO] Register: dubbo://172.22.213.199:20880/com.vivo.api.DemoService?anyhost=true&application=provider&default.delay=-1&default.retries=0&default.timeout=6000&delay=-1&dubbo=2.5.3&interface=com.vivo.api.DemoService&methods=sayHello&pid=12412&side=provider&timestamp=1570415338727, dubbo version: 2.5.3, current host: 127.0.0.1
[07/10/19 10:28:59:233 CST] main INFO zookeeper.ZookeeperRegistry: [DUBBO] Subscribe: provider://172.22.213.199:20880/com.vivo.api.DemoService?anyhost=true&application=provider&category=configurators&check=false&default.delay=-1&default.retries=0&default.timeout=6000&delay=-1&dubbo=2.5.3&interface=com.vivo.api.DemoService&methods=sayHello&pid=12412&side=provider&timestamp=1570415338727, dubbo version: 2.5.3, current host: 127.0.0.1
[07/10/19 10:28:59:302 CST] main INFO zookeeper.ZookeeperRegistry: [DUBBO] Notify urls for subscribe url provider://172.22.213.199:20880/com.vivo.api.DemoService?anyhost=true&application=provider&category=configurators&check=false&default.delay=-1&default.retries=0&default.timeout=6000&delay=-1&dubbo=2.5.3&interface=com.vivo.api.DemoService&methods=sayHello&pid=12412&side=provider&timestamp=1570415338727, urls: [empty://172.22.213.199:20880/com.vivo.api.DemoService?anyhost=true&application=provider&category=configurators&check=false&default.delay=-1&default.retries=0&default.timeout=6000&delay=-1&dubbo=2.5.3&interface=com.vivo.api.DemoService&methods=sayHello&pid=12412&side=provider&timestamp=1570415338727], dubbo version: 2.5.3, current host: 127.0.0.1

Zookeeper控制台输出:

[07/10/19 10:28:59:131 CST] main-EventThread INFO zkclient.ZkClient: zookeeper state changed (SyncConnected)
[07/10/19 10:28:59:132 CST] main INFO zookeeper.ZookeeperRegistry: [DUBBO] Register: dubbo://172.22.213.199:20880/com.vivo.api.DemoService?anyhost=true&application=provider&default.delay=-1&default.retries=0&default.timeout=6000&delay=-1&dubbo=2.5.3&interface=com.vivo.api.DemoService&methods=sayHello&pid=12412&side=provider&timestamp=1570415338727, dubbo version: 2.5.3, current host: 127.0.0.1
[07/10/19 10:28:59:233 CST] main INFO zookeeper.ZookeeperRegistry: [DUBBO] Subscribe: provider://172.22.213.199:20880/com.vivo.api.DemoService?anyhost=true&application=provider&category=configurators&check=false&default.delay=-1&default.retries=0&default.timeout=6000&delay=-1&dubbo=2.5.3&interface=com.vivo.api.DemoService&methods=sayHello&pid=12412&side=provider&timestamp=1570415338727, dubbo version: 2.5.3, current host: 127.0.0.1
[07/10/19 10:28:59:302 CST] main INFO zookeeper.ZookeeperRegistry: [DUBBO] Notify urls for subscribe url provider://172.22.213.199:20880/com.vivo.api.DemoService?anyhost=true&application=provider&category=configurators&check=false&default.delay=-1&default.retries=0&default.timeout=6000&delay=-1&dubbo=2.5.3&interface=com.vivo.api.DemoService&methods=sayHello&pid=12412&side=provider&timestamp=1570415338727, urls: [empty://172.22.213.199:20880/com.vivo.api.DemoService?anyhost=true&application=provider&category=configurators&check=false&default.delay=-1&default.retries=0&default.timeout=6000&delay=-1&dubbo=2.5.3&interface=com.vivo.api.DemoService&methods=sayHello&pid=12412&side=provider&timestamp=1570415338727], dubbo version: 2.5.3, current host: 127.0.0.1

 

说明provider启动成功。

完整项目结构如下所示:

技术图片

2.3 创建consumer的maven项目

该项目的pom.xml文件与provider中的一致,可直接粘贴复制即可。在resources中新建spring文件夹,再新建一个consumer.xml,用以配置消费者服务。

<?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans"
      xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
      xmlns:dubbo="http://code.alibabatech.com/schema/dubbo"
      xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans.xsd
      http://code.alibabatech.com/schema/dubbo http://code.alibabatech.com/schema/dubbo/dubbo.xsd">
   <dubbo:application name="consumer"/>
   <dubbo:registry address="zookeeper://172.22.213.199:2181" />
   <dubbo:reference id="demoService" check="false" interface="com.vivo.api.DemoService" />
</beans>

log4j.properties的配置也与provider中一致。

在ConsumerApplication.java中进行配置,启动消费者服务。

public class ConsumerApplication {
   public static void main(String[] args) {
       ClassPathXmlApplicationContext context=new ClassPathXmlApplicationContext("spring/consumer.xml");
       context.start();
       DemoService demoService=(DemoService)context.getBean("demoService");
           System.out.println(demoService.sayHello("world"));
  }
}

控制台输出:

[07/10/19 10:40:48:225 CST] main INFO transport.AbstractClient: [DUBBO] Start NettyClient NJ-11103874/172.22.213.199 connect to the server /172.22.213.199:20880, dubbo version: 2.5.3, current host: 172.22.213.199
[07/10/19 10:40:48:263 CST] main INFO config.AbstractConfig: [DUBBO] Refer dubbo service com.vivo.api.DemoService from url zookeeper://172.22.213.199:2181/com.alibaba.dubbo.registry.RegistryService?anyhost=true&application=consumer&check=false&default.delay=-1&default.retries=0&default.timeout=6000&delay=-1&dubbo=2.5.3&interface=com.vivo.api.DemoService&methods=sayHello&pid=7500&side=consumer&timestamp=1570416047344, dubbo version: 2.5.3, current host: 172.22.213.199

hello world

[07/10/19 10:40:48:309 CST] DubboShutdownHook INFO config.AbstractConfig: [DUBBO] Run shutdown hook now., dubbo version: 2.5.3, current host: 172.22.213.199
[07/10/19 10:40:48:310 CST] DubboShutdownHook INFO support.AbstractRegistryFactory: [DUBBO] Close all registries [zookeeper://172.22.213.199:2181/com.alibaba.dubbo.registry.RegistryService?application=consumer&dubbo=2.5.3&interface=com.alibaba.dubbo.registry.RegistryService&pid=7500&timestamp=1570416047383], dubbo version: 2.5.3, current host: 172.22.213.199
[07/10/19 10:40:48:310 CST] DubboShutdownHook INFO zookeeper.ZookeeperRegistry: [DUBBO] Destroy registry:zookeeper://172.22.213.199:2181/com.alibaba.dubbo.registry.RegistryService?application=consumer&dubbo=2.5.3&interface=com.alibaba.dubbo.registry.RegistryService&pid=7500&timestamp=1570416047383, dubbo version: 2.5.3, current host: 172.22.213.199
[07/10/19 10:40:48:310 CST] DubboShutdownHook INFO zookeeper.ZookeeperRegistry: [DUBBO] Unregister: consumer://172.22.213.199/com.vivo.api.DemoService?application=consumer&category=consumers&check=false&dubbo=2.5.3&interface=com.vivo.api.DemoService&methods=sayHello&pid=7500&side=consumer&timestamp=1570416047344, dubbo version: 2.5.3, current host: 172.22.213.199
[07/10/19 10:40:48:331 CST] DubboShutdownHook INFO zookeeper.ZookeeperRegistry: [DUBBO] Destroy unregister url consumer://172.22.213.199/com.vivo.api.DemoService?application=consumer&category=consumers&check=false&dubbo=2.5.3&interface=com.vivo.api.DemoService&methods=sayHello&pid=7500&side=consumer&timestamp=1570416047344, dubbo version: 2.5.3, current host: 172.22.213.199
[07/10/19 10:40:48:331 CST] DubboShutdownHook INFO zookeeper.ZookeeperRegistry: [DUBBO] Unsubscribe: consumer://172.22.213.199/com.vivo.api.DemoService?application=consumer&category=providers,configurators,routers&check=false&dubbo=2.5.3&interface=com.vivo.api.DemoService&methods=sayHello&pid=7500&side=consumer&timestamp=1570416047344, dubbo version: 2.5.3, current host: 172.22.213.199
[07/10/19 10:40:48:331 CST] DubboShutdownHook INFO zookeeper.ZookeeperRegistry: [DUBBO] Destroy unsubscribe url consumer://172.22.213.199/com.vivo.api.DemoService?application=consumer&category=providers,configurators,routers&check=false&dubbo=2.5.3&interface=com.vivo.api.DemoService&methods=sayHello&pid=7500&side=consumer&timestamp=1570416047344, dubbo version: 2.5.3, current host: 172.22.213.199
[07/10/19 10:40:48:331 CST] ZkClient-EventThread-13-172.22.213.199:2181 INFO zkclient.ZkEventThread: Terminate ZkClient event thread.
[07/10/19 10:40:48:353 CST] DubboShutdownHook INFO zookeeper.ZooKeeper: Session: 0x10038dc26870002 closed
[07/10/19 10:40:48:356 CST] DubboShutdownHook INFO dubbo.DubboProtocol: [DUBBO] Close dubbo connect: /172.22.213.199:65267-->/172.22.213.199:20880, dubbo version: 2.5.3, current host: 172.22.213.199
[07/10/19 10:40:48:358 CST] DubboShutdownHook INFO netty.NettyChannel: [DUBBO] Close netty channel [id: 0x55f616cf, /172.22.213.199:65267 => /172.22.213.199:20880], dubbo version: 2.5.3, current host: 172.22.213.199
[07/10/19 10:40:48:361 CST] main-EventThread INFO zookeeper.ClientCnxn: EventThread shut down for session: 0x10038dc26870002
[07/10/19 10:40:48:364 CST] DubboShutdownHook INFO dubbo.DubboProtocol: [DUBBO] Close dubbo connect: 172.22.213.199:0-->172.22.213.199:20880, dubbo version: 2.5.3, current host: 172.22.213.199
[07/10/19 10:40:48:364 CST] DubboShutdownHook INFO dubbo.DubboProtocol: [DUBBO] Destroy reference: dubbo://172.22.213.199:20880/com.vivo.api.DemoService?anyhost=true&application=consumer&check=false&default.delay=-1&default.retries=0&default.timeout=6000&delay=-1&dubbo=2.5.3&interface=com.vivo.api.DemoService&methods=sayHello&pid=7500&side=consumer&timestamp=1570416047344, dubbo version: 2.5.3, current host: 172.22.213.199
[07/10/19 10:40:48:363 CST] DubboSharedHandler-thread-1 INFO dubbo.DubboProtocol: [DUBBO] disconected from /172.22.213.199:20880,url:dubbo://172.22.213.199:20880/com.vivo.api.DemoService?anyhost=true&application=consumer&check=false&codec=dubbo&default.delay=-1&default.retries=0&default.timeout=6000&delay=-1&dubbo=2.5.3&heartbeat=60000&interface=com.vivo.api.DemoService&methods=sayHello&pid=7500&side=consumer&timestamp=1570416047344, dubbo version: 2.5.3, current host: 172.22.213.199

Process finished with exit code 0


消费者启动成功。

完整项目结构如下所示:

技术图片

以上是关于dubbo入门的主要内容,如果未能解决你的问题,请参考以下文章

dubbo远程调用(rpc)-->快速入门+管理控制台+整合Springboot开发

dubbo远程调用(rpc)-->快速入门+管理控制台+整合Springboot开发

dubbo 从入门到精通 监控中心搭建

推荐net开发cad入门阅读代码片段

探花交友day00—探花交友前置Dubbo

Dubbo的使用