天天看點

Dubbo入門 - 分布式系統開發技術本文學習目标1 背景2 需求3 架構4 Dubbo服務調用工作流程5 使用參考

本文學習目标

➢ 了解dubbo的用途

➢ 掌握dubbo的架構

➢ 掌握dubbo的使用

1 背景

随着網際網路的發展,網站應用的規模不斷擴大,正常的垂直應用架構已無法應對,分布式服務架構以及流動計算架構勢在必行,亟需一個治理系統確定架構有條不紊的演進。

1.1 單一應用架構

當網站流量很小時,隻需一個應用,将所有功能都部署在一起,以減少部署節點和成本。

此時,用于簡化增删改查工作量的資料通路架構(ORM)是關鍵。

1.2 垂直應用架構

當通路量逐漸增大,單一應用增加機器帶來的加速度越來越小,将應用拆成互不相幹的幾個應用,以提升效率。此時,用于加速前端頁面開發的Web架構(MVC)是關鍵。

1.3 分布式服務架構

當垂直應用越來越多,應用之間互動不可避免,将核心業務抽取出來,作為獨立的服務,逐漸形成穩定的服務中心,使前端應用能更快速的響應多變的市場需求。

此時,用于提高業務複用及整合的分布式服務架構(RPC)是關鍵。

1.4 流動計算架構

當服務越來越多,容量的評估,小服務資源的浪費等問題逐漸顯現,此時需增加一個排程中心基于通路壓力實時管理叢集容量,提高叢集使用率。

此時,用于提高機器使用率的資源排程和治理中心(SOA)是關鍵。

2 需求

在大規模服務化之前,應用可能隻是通過 RMI 或 Hessian 等工具,簡單的暴露和引用遠端服務,通過配置服務的URL位址進行調用,通過 F5 等硬體進行負載均衡。

Java遠端方法調用,即Java RMI(Java Remote Method Invocation)是Java裡一種用于實作遠端過程調用的應用程式程式設計接口。它使客戶機上運作的程式可以調用遠端伺服器上的對象。遠端方法調用特性使Java程式設計人員能夠在網絡環境中分布操作

RMI全部的宗旨就是盡可能簡化遠端接口對象的使用。

Java RMI極大地依賴于接口。在需要建立一個遠端對象的時候,程式員通過傳遞一個接口來隐藏底層的實作細節。用戶端得到的遠端對象句柄正好與本地的根代碼連接配接,由後者負責透過網絡通信。這樣一來,程式員隻需關心如何通過自己的接口句柄發送消息。

所使用Java包的名字是java.rmi。

Hessian是一個輕量級的remoting onhttp工具,使用簡單的方法提供了RMI的功能。 相比WebService,Hessian更簡單、快捷。采用的是二進制RPC協定,因為采用的是二進制協定,是以它很适合于發送二進制資料。

F5裝置用于最大限度提升鍊路性能與可用性的下一代廣域網鍊路流量管理。

當服務越來越多時,服務 URL 配置管理變得非常困難,F5 硬體負載均衡器的單點壓力也越來越大

此時需要一個服務注冊中心,動态地注冊和發現服務,使服務的位置透明

并通過在消費方擷取服務提供方位址清單,實作軟負載均衡和 Failover,降低對 F5 硬體負載均衡器的依賴,也能減少部分成本。

當進一步發展,服務間依賴關系變得錯蹤複雜,甚至分不清哪個應用要在哪個應用之前啟動,架構師都不能完整的描述應用的架構關系

這時,需要自動畫出應用間的依賴關系圖,以幫助架構師理清理關系。

接着,服務的調用量越來越大,服務的容量問題就暴露出來,這個服務需要多少機器支撐?什麼時候該加機器?

為了解決這些問題

  • 第一步,要将服務現在每天的調用量,響應時間,都統計出來,作為容量規劃的參考名額
  • 其次,要可以動态調整權重,線上上,将某台機器的權重一直加大,并在加大的過程中記錄響應時間的變化,直到響應時間到達門檻值,記錄此時的通路量,再以此通路量乘以機器數反推總容量

3 架構

3.0 dubbo-architucture

Dubbo入門 - 分布式系統開發技術本文學習目标1 背景2 需求3 架構4 Dubbo服務調用工作流程5 使用參考

3.1 節點角色說明

節點 角色說明
Provider 暴露服務的服務提供方
Consumer 調用遠端服務的服務消費方
Registry 服務注冊與發現的注冊中心
Monitor 統計服務的調用次數和調用時間的監控中心
Container 服務運作容器

3.2 調用關系說明

  1. Container負責啟動,加載,運作Provider
  2. Provider在啟動時,向Registry注冊自己提供的服務
  3. Consumer在啟動時,向Registry訂閱自己所需的服務
  4. Registry傳回Provider位址清單給Consumer,如果有變更,Registry将基于長連接配接推送變更資料給Consumer。
  5. Consumer從Provider位址清單中,基于軟負載均衡算法,選一台Provider調用,如果調用失敗,再選另一台
  6. 服務Consumer和Provider,在記憶體中累計調用次數和調用時間,定時每分鐘發送一次統計資料到監控中心

3.3 Dubbo 的架構特點

3.3.1 連通性

  • 注冊中心負責服務位址的注冊與查找

    相當于目錄服務,服務提供者和消費者隻在啟動時與注冊中心互動,注冊中心不轉發請求,壓力較小

  • 監控中心負責統計各服務調用次數,調用時間等

    統計先在記憶體彙總,每分鐘一次發送到監控中心伺服器

    ,并以報表展示
  • 服務提供者向注冊中心注冊其提供的服務

    并彙報調用時間到監控中心,此時間

    不包含網絡開銷

  • 服務消費者向注冊中心擷取服務提供者位址清單并根據負載算法直接調用提供者,同時彙報調用時間到監控中心,此時間包

    含網絡開銷

  • 注冊中心,服務提供者,服務消費者三者之間均為

    長連接配接

    ,監控中心除外
  • 注冊中心通過長連接配接感覺服務提供者的存在,服務提供者當機,注冊中心将立即推送事件通知消費者
  • 注冊中心和監控中心全部當機,不影響已運作的提供者和消費者,

    消費者在本地緩存了提供者清單

  • 注冊中心和監控中心都是可選

    ,服務消費者可以直連服務提供者

3.3.2 健壯性

  • 監控中心當機不影響使用,隻是丢失部分采樣資料
  • DB宕掉後,注冊中心仍能通過緩存提供服務清單查詢,但不能注冊新服務
  • 注冊中心對等叢集,任意一台宕掉後,将自動切換到另一台
  • 注冊中心全宕,服務提供者和服務消費者

    仍能通過本地緩存通信

  • 服務

    提供者無狀态

    ,任意一台宕掉,不影響使用
  • 服務提供者全宕,服務消費者應用将無法使用,并無限次重連等待服務提供者恢複

3.3.3 伸縮性

  • 注冊中心為對等叢集,可動态增加機器部署執行個體,所有用戶端将自動發現新的注冊中心
  • 服務提供者無狀态,可動态增加機器部署執行個體,注冊中心将推送新的服務提供者資訊給消費者

3.3.4 更新性

當服務叢集規模進一步擴大,帶動IT治理結構進一步更新,需要實作動态部署,進行流動計算,現有分布式服務架構不會帶來阻力。

3.3.4.0 未來可能的一種架構圖

  • dubbo-architucture-futures
Dubbo入門 - 分布式系統開發技術本文學習目标1 背景2 需求3 架構4 Dubbo服務調用工作流程5 使用參考

3.3.4.1 節點角色說明

Deployer 自動部署服務的本地代理
Repository 倉庫用于存儲服務應用釋出包
Scheduler 排程中心基于通路壓力自動增減服務提供者
Admin 統一管理控制台

4 Dubbo服務調用工作流程

Dubbo入門 - 分布式系統開發技術本文學習目标1 背景2 需求3 架構4 Dubbo服務調用工作流程5 使用參考

5 使用

5.1 項目可以如何使用dubbo?

服務提供端:

➢ 獨立的服務(以 普通的java程式形式)

➢ 內建在應用中(在應用中增加服務能力)

消費端:

➢在應用中調用遠端服務。

➢也可是在服務提供者中調用遠端服務。

5.2 食用指南

5.2.1 引入相關依賴

dubbo依賴說明:

5.2.2 配置dubbo架構(3種方式)

➢ spring schema xml方式

适用于spring應用

➢ 注解方式

适用于spring應用,需要2.6.3及以上版本

➢ API方式

API方式使用範圍說明: API僅用于OpenAPI, ESB, Test, Mock等系統內建。.

普通服務提供方或消費方,請采用XML配置方式使用dubbo

  1. 開發服務
  2. 配置服務
  3. 啟動、調用

5.2.3 本地服務 Spring 配置

5.2.4 遠端服務 Spring 配置

在本地服務的基礎上,隻需做簡單配置,即可完成遠端化:

  • 将上面的 local.xml 配置拆分成兩份,将服務定義部分放在服務提供方 remote-provider.xml,将服務引用部分放在服務消費方 remote-consumer.xml
  • 并在提供方增加暴露服務配置 dubbo:service ,在消費方增加引用服務配置 dubbo:reference
  • remote-provider.xml
  • remote-consumer.xml

5.2.5 spring boot中內建

方式一: @EnableDubbo 注解;

在springboot的啟動類.上加@EnableDubbo注解開啟dubbo (服務提供者、消費者的是一樣的,掃描的包可能不同)

Dubbo入門 - 分布式系統開發技術本文學習目标1 背景2 需求3 架構4 Dubbo服務調用工作流程5 使用參考
Dubbo入門 - 分布式系統開發技術本文學習目标1 背景2 需求3 架構4 Dubbo服務調用工作流程5 使用參考

方式二: dubbo-spring-boot-starter方式

1添加dubbo-spring- boot-starter

Dubbo入門 - 分布式系統開發技術本文學習目标1 背景2 需求3 架構4 Dubbo服務調用工作流程5 使用參考

2 dubbo配置和方式一樣

Dubbo入門 - 分布式系統開發技術本文學習目标1 背景2 需求3 架構4 Dubbo服務調用工作流程5 使用參考

通過dubbo.scan.base-packages參數指定dubbo掃描的包(服務提供者、 消費者設定方式一樣)

參考