1. 程式人生 > >java分散式服務框架:zookeeper+dubbo+springmvc整合

java分散式服務框架:zookeeper+dubbo+springmvc整合

Dubbo是一個分散式服務框架,在這基礎上可以做成分散式計算機網路解決很多高併發或者資料處理量大的問題!二zookeeper又是dubbo的一個重要元件,在此,我藉助java語言和springmvc框架介紹如何初步構建一個dubbo服務框架.

一:Dubbo背景

大規模服務化之前,應用可能只是通過RMIHessian等工具,簡單的暴露和引用遠端服務,通過配置服務的URL地址進行呼叫,通過F5等硬體進行負載均衡。

(1) 當服務越來越多時,服務URL配置管理變得非常困難,F5硬體負載均衡器的單點壓力也越來越大。

此時需要一個服務註冊中心,動態的註冊和發現服務,使服務的位置透明。

並通過在消費方獲取服務提供方地址列表,實現軟負載均衡和Failover

,降低對F5硬體負載均衡器的依賴,也能減少部分成本。

(2) 當進一步發展,服務間依賴關係變得錯蹤複雜,甚至分不清哪個應用要在哪個應用之前啟動,架構師都不能完整的描述應用的架構關係。

這時,需要自動畫出應用間的依賴關係圖,以幫助架構師理清理關係。

(3) 接著,服務的呼叫量越來越大,服務的容量問題就暴露出來,這個服務需要多少機器支撐?什麼時候該加機器?

為了解決這些問題,第一步,要將服務現在每天的呼叫量,響應時間,都統計出來,作為容量規劃的參考指標。

其次,要可以動態調整權重,在線上,將某臺機器的權重一直加大,並在加大的過程中記錄響應時間的變化,直到響應時間到達閥值,記錄此時的訪問量,再以此訪問量乘以機器數反推總容量。

二:Dubbo的簡介

Dubbo是一個分散式服務框架,解決了上面的所面對的問題,Dubbo的架構如圖所示:


節點角色說明:

Provider: 暴露服務的服務提供方。

Consumer: 呼叫遠端服務的服務消費方。

Registry: 服務註冊與發現的註冊中心。

Monitor: 統計服務的呼叫次調和呼叫時間的監控中心。

Container: 服務執行容器。

呼叫關係說明:

0. 服務容器負責啟動,載入,執行服務提供者。

1. 服務提供者在啟動時,向註冊中心註冊自己提供的服務。

2. 服務消費者在啟動時,向註冊中心訂閱自己所需的服務。

3. 註冊中心返回服務提供者地址列表給消費者,如果有變更,註冊中心將基於長連線推送變更資料給消費者。

4. 服務消費者,從提供者地址列表中,基於軟負載均衡演算法,選一臺提供者進行呼叫,如果呼叫失敗,再選另一臺呼叫。

5. 服務消費者和提供者,在記憶體中累計呼叫次數和呼叫時間,定時每分鐘傳送一次統計資料到監控中心。

 Dubbo提供了很多協議,Dubbo議、RMI協議Hessian協議,我們檢視Dubbo原始碼,有各種協議的實現.

我之前沒用Dubbo之前時,大部分都使用Hessian來使用我們服務的暴露和呼叫,利用HessianProxyFactory呼叫遠端介面。

上面是參考了Dubbo官方網介紹,接下來我們來介紹SpringMVCDubboZookeeper整合使用。

三:Dubbo與Zookeeper、SpringMVC整合

  第一步:在Linux上安裝Zookeeper

       Zookeeper作為Dubbo服務的註冊中心,Dubbo原先基於資料庫的註冊中心,沒采用ZookeeperZookeeper一個分散式的服務框架,是樹型的目錄服務的資料儲存,能做到叢集管理資料 ,這裡能很好的作為Dubbo服務的註冊中心,Dubbo能與Zookeeper做到叢集部署,當提供者出現斷電等異常停機時,Zookeeper註冊中心能自動刪除提供者資訊,當提供者重啟時,能自動恢復註冊資料,以及訂閱請求。我們先在linux上安裝Zookeeper,我們安裝最簡單的單點,叢集比較麻煩。

    (2) 我們放到Linux下的一個資料夾,然後解壓:

      #tar zxvf zookeeper-3.4.6.tar.gz

  (3)然後在對應的zookeeper-3.4.6/conf 下有一個檔案zoo_sample.cfg的這個檔案裡面配置了監聽客戶端連線的埠等一些資訊,Zookeeper 在啟動時會找zoo.cfg這個檔案作為預設配置檔案,所以我們複製一個名稱為zoo.cfg的檔案.

說明:

 clientPort:監聽客戶端連線的埠。

 tickTime:基本事件單元,以毫秒為單位。它用來控制心跳和超時,預設情況下最小的會話超時時間為兩倍的 tickTime

 我們可以對配置檔案的埠等或者進行高階配置和叢集配置例如:maxClientCnxns:限制連線到 ZooKeeper 的客戶端的數量等

 (4)啟動Zookeeper 的服務,如圖所示:

    

 到這邊Zookeeper的安裝和配置完成

  第二步:配置dubbo-admin的管理頁面,方便我們管理頁面

    (1)下載dubbo-admin-2.4.1.war包,在Linuxtomcat部署,先把dubbo-admin-2.4.1放在tomcatwebapps/ROOT下,然後進行解壓:

        #jar -xvf dubbo-admin-2.4.1.war

    (2)然後到webapps/ROOT/WEB-INF下,有一個dubbo.properties檔案,裡面指向Zookeeper ,使用的是Zookeeper 的註冊中心,如圖所示:

        

   (3)然後啟動tomcat服務,使用者名稱和密碼:root,並訪問服務,顯示登陸頁面,說明dubbo-admin部署成功,如圖所示:

      

 第三步:SpringMVC與Dubbo的整合,這邊使用的Maven的管理專案

    第一:我們先開發服務註冊的,就是提供服務

    (1)test-maven-api專案加入了一個服務介面,程式碼如下:

  1. publicinterface TestRegistryService {  
  2.    public String hello(String name);  
  3. }  
  (2)test-maven-console在pom.xml加入Dubbo和Zookeeper的jar包、引用test-maven-apijar包,程式碼如下:
  1.    <dependency>  
  2.     <groupId>cn.test</groupId>  
  3.     <artifactId>test-maven-api</artifactId>  
  4.     <version>0.0.1-SNAPSHOT</version>  
  5. </dependency>  
  6.    <dependency>  
  7.          <groupId>com.alibaba</groupId>  
  8.          <artifactId>dubbo</artifactId>  
  9.          <version>2.5.3</version>  
  10.      </dependency>  
  11.       <dependency>  
  12.          <groupId>org.apache.zookeeper</groupId>  
  13. <artifactId>zookeeper</artifactId>  
  14. <version>3.4.6</version>  
  15.      </dependency>  
  16.    <dependency>  
  17.      <groupId>com.github.sgroschupf</groupId>  
  18. <artifactId>zkclient</artifactId>  
  19. <version>0.1</version>  
  20.    </dependency>  
(3)test-maven-console實現具體的服務,程式碼如下:

  1. @Service("testRegistryService")  
  2. ublic class TestRegistryServiceImpl implements TestRegistryService {  
  3. public String hello(String name) {    
  4.     return"hello"+name;  
  5. }  

(4)我們服務以及實現好了,這時要暴露服務,程式碼如下:
  
  1. <?xml version="1.0" encoding="UTF-8"?>  
  2. <beans xmlns="http://www.springframework.org/schema/beans"
  3.     xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
  4.     xmlns:jee="http://www.springframework.org/schema/jee"
  5.     xmlns:tx="http://www.springframework.org/schema/tx"
  6.     <span style="color:#cc0000;">xmlns:dubbo="http://code.alibabatech.com/schema/dubbo"</span>  
  7.     xmlns:context="http://www.springframework.org/schema/context"
  8.     xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans-3.1.xsd
  9.     http://www.springframework.org/schema/tx http://www.springframework.org/schema/tx/spring-tx-3.1.xsd
  10.     http://www.springframework.org/schema/jee http://www.springframework.org/schema/jee/spring-jee-3.1.xsd
  11.     <span style="color:#990000;">http://code.alibabatech.com/schema/dubbo http://code.alibabatech.com/schema/dubbo/dubbo.xsd</span>
  12.     http://www.springframework.org/schema/context http://www.springframework.org/schema/context/spring-context-3.1.xsd"
  13.     default-lazy-init="false" >  
  14.    <!-- 提供方應用名稱資訊,這個相當於起一個名字,我們dubbo管理頁面比較清晰是哪個應用暴露出來的 -->  
  15.    <dubbo:application name="dubbo_provider"></dubbo:application>  
  16.    <!-- 使用zookeeper註冊中心暴露服務地址 -->    
  17.    <dubbo:registry address="zookeeper://127.0.0.1:2181" check="false" subscribe="false" register=""></dubbo:registry>  
  18.   <!-- 要暴露的服務介面 -->    
  19.   <dubbo:service interface="cn.test.dubbo.registry.service.TestRegistryService" ref="testRegistryService" />        
  20. </beans>  

說明:

   dubbo:registry 標籤一些屬性的說明:

      1register是否向此註冊中心註冊服務,如果設為false,將只訂閱,不註冊

      2check註冊中心不存在時,是否報錯。

      3subscribe是否向此註冊中心訂閱服務,如果設為false,將只註冊,不訂閱

      4timeout註冊中心請求超時時間(毫秒)

      5address可以Zookeeper叢集配置,地址可以多個以逗號隔開等。

  dubbo:service標籤的一些屬性說明:

     1interface服務介面的路徑

     2ref引用對應的實現類的BeanID

     3registry向指定註冊中心註冊,在多個註冊中心時使用,值為<dubbo:registry>id屬性,多個註冊中心ID用逗號分隔,如果不想將該服務註冊到任何registry,可將值設為N/A

     4register 預設true ,該協議的服務是否註冊到註冊中心。

  (5)啟動專案,然後我們在Dubbo管理頁面上顯示,已經暴露的服務,但顯示還沒有消費者,因為我們還沒實現消費者服務,如圖所示:

  

   第二:我們在開發服務消費者,就是呼叫服務,我們在新建一個新的消費者專案結構如圖所示:

       

   (1)test-maven-server-console的pom.xml引入Dubbo和Zookeeper的jar包、test-maven-apijar包,因為引入test-maven-apijar包,我們在專案中呼叫像在本地呼叫一樣。程式碼如下:

  1.    <dependency>  
  2.     <groupId>cn.test</groupId>  
  3.     <artifactId>test-maven-api</artifactId>  
  4.     <version>0.0.1-SNAPSHOT</version>  
  5. </dependency>  
  6.    <dependency>  
  7.          <groupId>com.alibaba</groupId>  
  8.          <artifactId>dubbo</artifactId>  
  9.          <version>2.5.3</version>  
  10.      </dependency>  
  11.       <dependency>  
  12.          <groupId>org.apache.zookeeper</groupId>  
  13. <artifactId>zookeeper</artifactId>  
  14. <version>3.4.6</version>  
  15.      </dependency>  
  16.    <dependency>  
  17.      <groupId>com.github.sgroschupf</groupId>  
  18. <artifactId>zkclient</artifactId>  
  19. <version>0.1</version>  
  20.    </dependency>  
(2)test-maven-server-console專案的具體實現,程式碼如下:

  1. @Controller
  2. publicclass IndexController {  
  3.     @Autowired
  4.     private TestRegistryService testRegistryService;  
  5.     @RequestMapping("/hello")  
  6.     public String index(Model model){  
  7.          String name=testRegistryService.hello("zz");  
  8.          System.out.println("xx=="+name);  
  9.         return"";  
  10.     }  
  11. 相關推薦

    java分散式服務框架:zookeeper+dubbo+springmvc整合

    Dubbo是一個分散式服務框架,在這基礎上可以做成分散式計算機網路解決很多高併發或者資料處理量大的問題!二zookeeper又是dubbo的一個重要元件,在此,我藉助java語言和springmvc框架介紹如何初步構建一個dubbo服務框架.一:Dubbo背景大規模服務化之前

    分散式服務框架Zookeeper介紹、原理及應用

    轉載:https://www.jianshu.com/p/bf32e44d3113 分散式服務框架Zookeeper介紹、原理及應用 Zookeeper簡介 Zookeeper 分散式服務框架是 Apache Hadoop 的一個子專案,它主要是用來解決分散式應用中經常遇到的一些資料管理

    分散式服務框架zookeeper

    一個開源的分散式的,為分散式應用提供協調服務的Apache專案 提供一個簡單的原語集合,以便於分散式應用可以在它之上構建更高層次的同步服務 設計非常易於程式設計,它使用的是類似於檔案系統那樣的樹形資料

    一篇文章讀懂分散式服務框架ZooKeeper

    在SOA架構設計中。系統對於業務邏輯複用的需求十分強烈,上層業務都想借用已有的底層服務,來快速搭建更多,更豐富的業務。從而降低新業務開展的人力和時間成本,已快速滿足瞬息萬變的市場需求。而公共的業務被拆分出來,形成可共用的服務,最大程度地保障了程式碼和邏輯的複用,

    Zookeeper--分散式服務框架 Zookeeper -- 管理分散式環境中的資料

    Zookeeper 分散式服務框架是 Apache Hadoop 的一個子專案,它主要是用來解決分散式應用中經常遇到的一些資料管理問題,如:統一命名服務、狀態同步服務、叢集管理、分散式應用配置項的管理等。本文將從使用者角度詳細介紹 Zookeeper 的安裝和配置檔案中

    JavaDubbo+zookeeper搭建分散式服務框架

    一、前言      前一段時間,小編工作的架構換成了Dubbo的分散式架構,專案也改成了SOA(面向服務的架構),在專案中分成了六個服務,每個服務可以單獨執行,服務之間也可以互相呼叫。下面小編就Dubbo官網提供的一個簡單的Demo來帶領大家實現一個分散式服務框架。二、環境要

    高可用分散式服務框架搭建(DubboZooKeeper

    以下是官方例項部署方法。此處涉及四個服務: zookeeper:註冊中心 dubbo-admin:服務管理後臺 dubbo-demo-provider:生產者(服務提供者) dubbo-demo-consumer:消費者(服務使用者) 需要注意的是,必

    Maven多模組,Dubbo分散式服務框架SpringMVC,前後端分離專案,基礎搭建,搭建過程出現的問題

    1 <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" 2 xsi:schemaLocation="http://maven.apac

    Maven聚合工程,Dubbo分散式服務框架SpringMVC,前後端分離專案

    <!--spring載入--> <context-param> <param-name>contextConfigLocation</param-name> <param-value>classpath:spring/

    DubboZookeeperSpringMVC整合和使用

    描述 取出 有變 monit work 需要 可用 jqgrid png 互聯網的發展,網站應用的規模不斷擴大,常規的垂直應用架構已無法應對,分布式服務架構以及流動計算架構勢在必行,Dubbo是一個分布式服務框架,在這種情況下誕生的。現在核心業務抽取出來,作為獨立的服務,使

    阿里巴巴分散式服務框架dubbo學習筆記

    Dubbo是什麼? Dubbo是一個分散式服務框架,致力於提供高效能和透明化的RPC遠端服務呼叫方案,以及SOA服務治理方案。簡單的說,dubbo就是個服務框架,如果沒有分散式的需求,其實是不需要用的,只有在分散式的時候,才有dubbo這樣的分散式服務框架的需求,並且本質上是個服務呼叫的東東,說

    Dubbo阿里Alibaba開源的分散式服務框架

    Dubbo是什麼? Dubbo是阿里巴巴SOA服務化治理方案的核心框架,每天為2,000+個服務提供3,000,000,000+次訪問量支援,並被廣泛應用於阿里巴巴集團的各成員站點。 Dubbo是一個分散式服務框架,致力於提供高效能和透明化的RPC遠端服務呼叫方案,以及SOA服務治理方案。 其

    Dubbo(x)相關(分散式服務框架

    Dubbo Dubbo是阿里的分散式服務框架,基於zookeeper實現,已於12年底停止維護升級 Dubbox是噹噹團隊基於dubbo升級的一個版本 與zookeeper的關係:Dubbo將註冊中心進行抽象,使得它可以外接不同的儲存媒介給註冊中心提供服務,有ZooKeeper,Memc

    一篇文章帶你深入瞭解Dubbo分散式服務框架

    一、產生的背景 隨著網際網路的發展,網站應用的規模不斷擴大,常規的垂直應用架構已無法應對,分散式服務架構以及流動計算架構勢在必行,亟需一個治理系統確保架構有條不紊的演進。下面我們用一個圖來具體說明架構和開發框架的演進過程。單一應用架構當網站流量很小時,只需一個應用,將所有功能都部署在一起,以減少部署節點和成

    dubbo(開源分散式服務框架)-demo

    dubbo-demo-api  提供服務者和消費者都需要介面名和方法名才能呼叫 dubbo-demo-consumer  服務消費者(消費者) dubbo-demo-provider 服務提供者(生產者) dubbo-demo-parent maven父版本提供者

    dubbo(開源分散式服務框架)1---------Dubbo需要四大基本元件

    Dubbo需要四大基本元件:Registry、Monitor、Provider、Consumer。  Provider:提供者 Consumer:消費者 registry:註冊中心(相當於中介) monitor:監控中心(dubbo自己的監控專案,直接解壓在tomcat下就

    Dubbo分散式服務框架搭建

    一、zookeeper安裝與啟動 1.前往https://www.apache.org/dyn/closer.cgi/zookeeper/下載zookeeper。 2.將路徑zookeeper-3.5.2-alpha\conf下zoo_sample.cfg 改名為 zoo.cfg。 3.

    阿里P8“架構師”帶你深入瞭解Dubbo分散式服務框架

    一、產生的背景 隨著網際網路的發展,網站應用的規模不斷擴大,常規的垂直應用架構已無法應對,分散式服務架構以及流動計算架構勢在必行,亟需一個治理系統確保架構有條不紊的演進。下面我們用一個圖來具體說明架構和開發框架的演進過程。   單一應用架構 當網站流量很小時,只需一個

    Dubbo-一個分散式服務框架

    Dubbo的簡單介紹 Dubbo是一個分散式服務框架,致力於提供高效能和透明化的RPC遠端服務呼叫方案,說的簡單點,其最最最基本作用就是:高效的應用程式之間的通訊。如果服務越來越多,容量的評估,小服務資源的浪費等問題,這時Dubbo就是資源排程和治理中心的管理

    分散式服務框架Dubbo的配置

    一、Dubbo常用配置 dubbo:service 服務配置,用於暴露一個服務,定義服務的元資訊,一個服務可以用多個協議暴露,一個服務也可以註冊到多個註冊中心。 eg、<dubbo:service ref=“demoService” interface=