设为首页 收藏本站
查看: 1893|回复: 0

[经验分享] Dubbo与Zookeeper、SpringMVC整合和利用(负载均衡、容错)

[复制链接]

尚未签到

发表于 2015-9-7 08:30:54 | 显示全部楼层 |阅读模式
    互联网发展,扩大了网站应用程序的大小。传统的垂直应用架构已经无法应付。分布式服务架构和流量计算架构势在必行,Dubbo是一个分布式服务框架。在这样的情况下诞生的。如今核心业务抽取出来。作为独立的服务,使前端应用能更高速和稳定的响应。
  
  


  第一:介绍Dubbo背景
  


      DSC0000.jpg
  


  


  
  大规模服务化之前,应用可能仅仅是通过RMI或Hessian等工具,简单的暴露和引用远程服务,通过配置服务的URL地址进行调用,通过F5等硬件进行负载均衡。
  (1) 当服务越来越多时,服务URL配置管理变得很困难,F5硬件负载均衡器的单点压力也越来越大。
  此时须要一个服务注冊中心。动态的注冊和发现服务。使服务的位置透明。
  并通过在消费方获取服务提供方地址列表,实现软负载均衡和Failover,降低对F5硬件负载均衡器的依赖,也能降低部分成本。
  
  (2) 当进一步发展,服务间依赖关系变得错踪复杂,甚至分不清哪个应用要在哪个应用之前启动,架构师都不能完整的描写叙述应用的架构关系。
  这时,须要自己主动画出应用间的依赖关系图,以帮助架构师理清理关系。
  (3) 接着,服务的调用量越来越大,服务的容量问题就暴露出来。这个服务须要多少机器支撑?什么时候该加机器?
  为了解决这些问题。第一步。要将服务如今每天的调用量,响应时间。都统计出来。作为容量规划的參考指标。
  
  其次。要能够动态调整权重,在线上,将某台机器的权重一直加大。并在加大的过程中记录响应时间的变化,直到响应时间到达阀值,记录此时的訪问量。再以此訪问量乘以机器数反推总容量。
  


  第二:Dubbo的简单介绍


  
  Dubbo是一个分布式服务框架,攻克了上面的所面对的问题。Dubbo的架构如图所看到的:

DSC0001.jpg
  watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvY29uZ2Nvbmc2OA==/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/Center" alt="">
  
  节点角色说明:
  Provider: 暴露服务的服务提供方。
  
  Consumer: 调用远程服务的服务消费方。
  Registry: 服务注冊与发现的注冊中心。
  Monitor: 统计服务的调用次调和调用时间的监控中心。
  Container: 服务执行容器。
  


  调用关系说明:
  0. 服务容器负责启动,载入,执行服务提供者。
  1. 服务提供者在启动时,向注冊中心注冊自己提供的服务。
  2. 服务消费者在启动时。向注冊中心订阅自己所需的服务。
  3. 注冊中心返回服务提供者地址列表给消费者,假设有变更。注冊中心将基于长连接推送变更数据给消费者。
  4. 服务消费者,从提供者地址列表中,基于软负载均衡算法,选一台提供者进行调用,假设调用失败。再选还有一台调用。
  5. 服务消费者和提供者,在内存中累计调用次数和调用时间。定时每分钟发送一次统计数据到监控中心。
  


  
  


  
   Dubbo提供了非常多协议,Dubbo协议、RMI协议、Hessian协议,我们查看Dubbo源码,有各种协议的实现,如图所看到的:

DSC0002.jpg
  watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvY29uZ2Nvbmc2OA==/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/Center" alt="">
  
  
  我们之前没用Dubbo之前时,大部分都使用Hessian来使用我们服务的暴露和调用,利用HessianProxyFactory调用远程接口。


  上面是參考了Dubbo官方网介绍,接下来我们来介绍SpringMVC、Dubbo、Zookeeper整合使用。


  



第三:Dubbo与Zookeeper、SpringMVC整合使用    
    第一步:在Linux上安装Zookeeper
  
  Zookeeper作为Dubbo服务的注冊中心,Dubbo原先基于数据库的注冊中心,没採用Zookeeper。Zookeeper一个分布式的服务框架。是树型的文件夹服务的数据存储,能做到集群管理数据 ,这里能非常好的作为Dubbo服务的注冊中心,Dubbo能与Zookeeper做到集群部署,当提供者出现断电等异常停机时,Zookeeper注冊中心能自己主动删除提供者信息,当提供者重新启动时,能自己主动恢复注冊数据,以及订阅请求。我们先在linux上安装Zookeeper,我们安装最简单的单点,集群比較麻烦。
      (1)下载Zookeeper-3.4.6.tar.gz  地址http://www.apache.org/dist/zookeeper/
  
      (2) 我们放到Linux下的一个目录。然后解压:
  
        #tar zxvf zookeeper-3.4.6.tar.gz
    (3)然后在相应的zookeeper-3.4.6/conf 下有一个文件zoo_sample.cfg的这个文件中面配置了监听client连接的port等一些信息。Zookeeper 在启动时会找zoo.cfg这个文件作为默认配置文件,所以我们复制一个名称为zoo.cfg的文件。如图所看到的:

        DSC0003.jpg   watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvY29uZ2Nvbmc2OA==/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/Center" alt="">
  
     我们查看一下这个文件的里面的一些配置信息。如图所看到的:
DSC0004.jpg
  
  说明:
   clientPort:监听客户端连接的port。
   tickTime:基本事件单元,以毫秒为单位。它用来控制心跳和超时,默认情况下最小的会话超时时间为两倍的 tickTime。
   我们能够对配置文件的port等或者进行高级配置和集群配置比如:maxClientCnxns:限制连接到 ZooKeeper 的client的数量等
   (4)启动Zookeeper 的服务,如图所看到的:
DSC0005.jpg
   到这边Zookeeper的安装和配置完毕
    第二步:配置dubbo-admin的管理页面,方便我们管理页面
      (1)下载dubbo-admin-2.4.1.war包。在Linux的tomcat部署,先把dubbo-admin-2.4.1放在tomcat的webapps/ROOT下。然后进行解压:
          #jar -xvf dubbo-admin-2.4.1.war
      (2)然后到webapps/ROOT/WEB-INF下,有一个dubbo.properties文件。里面指向Zookeeper ,使用的是Zookeeper 的注冊中心。如图所看到的:
DSC0006.jpg   watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvY29uZ2Nvbmc2OA==/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/Center" alt="">
    (3)然后启动tomcat服务,username和password:root,并訪问服务,显示登陆页面。说明dubbo-admin部署成功。如图所看到的:
DSC0007.jpg
   第三步:SpringMVC与Dubbo的整合。这边使用的Maven的管理项目
      第一:我们先开发服务注冊的,就是提供服务,项目结构如图所看到的:
DSC0008.jpg
  (1)test-maven-api项目增加了一个服务接口。代码例如以下:
  

public interface TestRegistryService {
public String hello(String name);
}  (2)test-maven-console在pom.xml增加Dubbo和Zookeeper的jar包、引用test-maven-api的jar包,代码例如以下:  
  

      <dependency>
<groupId>cn.test</groupId>
<artifactId>test-maven-api</artifactId>
<version>0.0.1-SNAPSHOT</version>
</dependency>
<dependency>
<groupId>com.alibaba</groupId>
<artifactId>dubbo</artifactId>
<version>2.5.3</version>
</dependency>
<dependency>
<groupId>org.apache.zookeeper</groupId>
<artifactId>zookeeper</artifactId>
<version>3.4.6</version>
</dependency>
<dependency>
<groupId>com.github.sgroschupf</groupId>
<artifactId>zkclient</artifactId>
<version>0.1</version>
</dependency>(3)test-maven-console实现详细的服务,代码例如以下:



  @Service(&quot;testRegistryService&quot;)
public class TestRegistryServiceImpl implements TestRegistryService {
public String hello(String name) {
return &quot;hello&quot;+name;
}
}

(4)我们服务以及实现好了,这时要暴露服务,代码例如以下:

  <?

  xml version=&quot;1.0&quot; encoding=&quot;UTF-8&quot;?>
<beans xmlns=&quot;http://www.springframework.org/schema/beans&quot;
xmlns:xsi=&quot;http://www.w3.org/2001/XMLSchema-instance&quot;
xmlns:jee=&quot;http://www.springframework.org/schema/jee&quot;
xmlns:tx=&quot;http://www.springframework.org/schema/tx&quot;
<span style=&quot;color:#cc0000;&quot;>xmlns:dubbo=&quot;http://code.alibabatech.com/schema/dubbo&quot;</span>
xmlns:context=&quot;http://www.springframework.org/schema/context&quot;
xsi:schemaLocation=&quot;http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans-3.1.xsd
http://www.springframework.org/schema/tx http://www.springframework.org/schema/tx/spring-tx-3.1.xsd
http://www.springframework.org/schema/jee http://www.springframework.org/schema/jee/spring-jee-3.1.xsd
<span style=&quot;color:#990000;&quot;>http://code.alibabatech.com/schema/dubbo http://code.alibabatech.com/schema/dubbo/dubbo.xsd</span>
http://www.springframework.org/schema/context http://www.springframework.org/schema/context/spring-context-3.1.xsd&quot;
default-lazy-init=&quot;false&quot; >
<!-- 提供方应用名称信息,这个相当于起一个名字。我们dubbo管理页面比較清晰是哪个应用暴露出来的 -->
<dubbo:application name=&quot;dubbo_provider&quot;></dubbo:application>
<!-- 使用zookeeper注冊中心暴露服务地址 -->  
<dubbo:registry address=&quot;zookeeper://127.0.0.1:2181&quot; check=&quot;false&quot; subscribe=&quot;false&quot; register=&quot;&quot;></dubbo:registry>
<!-- 要暴露的服务接口 -->  
<dubbo:service interface=&quot;cn.test.dubbo.registry.service.TestRegistryService&quot; ref=&quot;testRegistryService&quot; />  
</beans>  
  说明:
     dubbo:registry 标签一些属性的说明:
        1)register是否向此注冊中心注冊服务,假设设为false。将仅仅订阅,不注冊。
        2)check注冊中心不存在时,是否报错。
        3)subscribe是否向此注冊中心订阅服务。假设设为false,将仅仅注冊。不订阅。
  
        4)timeout注冊中心请求超时时间(毫秒)。
        5)address能够Zookeeper集群配置,地址能够多个以逗号隔开等。
  
    dubbo:service标签的一些属性说明:
       1)interface服务接口的路径
       2)ref引用相应的实现类的Bean的ID
       3)registry向指定注冊中心注冊,在多个注冊中心时使用,&#20540;为<dubbo:registry>的id属性。多个注冊中心ID用逗号分隔,假设不想将该服务注冊到不论什么registry。可将&#20540;设为N/A
       4)register 默认true ,该协议的服务是否注冊到注冊中心。
  


    (5)启动项目。然后我们在Dubbo管理页面上显示,已经暴露的服务,但显示还没有消费者,由于我们还没实现消费者服务,如图所看到的:
     DSC0009.jpg

     第二:我们在开发服务消费者。就是调用服务,我们在新建一个新的消费者项目结构如图所看到的:



       DSC00010.jpg   watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvY29uZ2Nvbmc2OA==/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/Center" alt="">
     (1)test-maven-server-console的pom.xml引入Dubbo和Zookeeper的jar包、test-maven-api的jar包,由于引入test-maven-api的jar包,我们在项目中调用像在本地调用一样。代码例如以下:
  

      <dependency>
<groupId>cn.test</groupId>
<artifactId>test-maven-api</artifactId>
<version>0.0.1-SNAPSHOT</version>
</dependency>
<dependency>
<groupId>com.alibaba</groupId>
<artifactId>dubbo</artifactId>
<version>2.5.3</version>
</dependency>
<dependency>
<groupId>org.apache.zookeeper</groupId>
<artifactId>zookeeper</artifactId>
<version>3.4.6</version>
</dependency>
<dependency>
<groupId>com.github.sgroschupf</groupId>
<artifactId>zkclient</artifactId>
<version>0.1</version>
</dependency>
  (2)test-maven-server-console项目的详细实现,代码例如以下:



     @Controller
public class IndexController {
@Autowired
private TestRegistryService testRegistryService;
@RequestMapping(&quot;/hello&quot;)
public String index(Model model){
String name=testRegistryService.hello(&quot;zz&quot;);
System.out.println(&quot;xx==&quot;+name);
return &quot;&quot;;
}
}

  (3)我们要引用的地址,代码例如以下:

   <?xml version=&quot;1.0&quot; encoding=&quot;UTF-8&quot;?>
<beans xmlns=&quot;http://www.springframework.org/schema/beans&quot;
xmlns:xsi=&quot;http://www.w3.org/2001/XMLSchema-instance&quot;
xmlns:jee=&quot;http://www.springframework.org/schema/jee&quot;
xmlns:tx=&quot;http://www.springframework.org/schema/tx&quot;
<span style=&quot;background-color: rgb(255, 255, 255);&quot;><span style=&quot;color:#990000;&quot;>xmlns:dubbo=&quot;http://code.alibabatech.com/schema/dubbo&quot;</span></span>
xmlns:context=&quot;http://www.springframework.org/schema/context&quot;
xsi:schemaLocation=&quot;http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans-3.1.xsd
http://www.springframework.org/schema/tx http://www.springframework.org/schema/tx/spring-tx-3.1.xsd
http://www.springframework.org/schema/jee http://www.springframework.org/schema/jee/spring-jee-3.1.xsd
<span style=&quot;color:#990000;&quot;>http://code.alibabatech.com/schema/dubbo http://code.alibabatech.com/schema/dubbo/dubbo.xsd</span>
http://www.springframework.org/schema/context http://www.springframework.org/schema/context/spring-context-3.1.xsd&quot;
default-lazy-init=&quot;false&quot; >
<dubbo:application name=&quot;dubbo_consumer&quot;></dubbo:application>
<!-- 使用zookeeper注冊中心暴露服务地址 -->  
<dubbo:registry address=&quot;zookeeper://192.168.74.129:2181&quot; check=&quot;false&quot;></dubbo:registry>
<!-- 要引用的服务 -->  
<dubbo:reference interface=&quot;cn.test.dubbo.registry.service.TestRegistryService&quot; id=&quot;testRegistryService&quot;></dubbo:reference>
</beans>
  
  说明:
     dubbo:reference 的一些属性的说明:
        1)interface调用的服务接口
        2)check 启动时检查提供者是否存在。true报错,false忽略
        3)registry 从指定注冊中心注冊获取服务列表,在多个注冊中心时使用,&#20540;为<dubbo:registry>的id属性。多个注冊中心ID用逗号分隔
        4)loadbalance 负载均衡策略,可选&#20540;:random,roundrobin,leastactive,分别表示:随机,轮循,最少活跃调用
     
  (4)项目启动。Dubbo管理页面。能看到消费者,如图所看到的:
DSC00011.jpg
  (5)然后訪问消费者项目,Controller层能像调用本地一样调用服务的详细实现,如图所看到的:
DSC00012.jpg
  


  


  
  Dubbo提供了多种容错方案,包含负载均衡这些。如图所看到的:
  

DSC00013.jpg
  watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvY29uZ2Nvbmc2OA==/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/Center" alt="">








  




         
版权声明:本文博客原创文章,博客,未经同意,不得转载。

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-110341-1-1.html 上篇帖子: [转]ZooKeeper的学习与应用 下篇帖子: ZooKeeper系列之三:ZooKeeper的安装
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表