摘要:服務提供方對外發布服務,服務需求方調用服務提供方所發布的服務。應用服務器通過統一數據訪問模塊訪問各種數據,減輕應用程序管理諸多數據源的麻煩。
原文地址:https://blog.coding.net/blog/General-architecture-for-Java-applications
1. 不同系統不同語言之間的交互當我們架設一個系統的時候通常需要考慮到如何與其他系統交互,所以我們首先需要知道各種系統之間是如何交互的,使用何種技術實現。
現在我們常見的不同系統不同語言之間的交互使用WebService,Http請求。WebService,即“Web 服務”,簡寫為 WS。從字面上理解,它其實就是“基于 Web 的服務”。而服務卻是雙方的,有服務需求方,就有服務提供方。服務提供方對外發布服務,服務需求方調用服務提供方所發布的服務。如果說得再專業一點,WS 其實就是建立在 HTTP 協議上實現異構系統通訊的工具。沒錯!WS 說白了還是基于 HTTP 協議的,也就是說,數據是通過 HTTP 進行傳輸的。最早我們是用CXF開發SOAP服務實現WS,后面我們是用REST服務實現WS(這個目前使用比較多,也最我用得最多的這一種)。基于CXF也可以開發REST服務,不過我們一般直接使用springMVC或者其他MVC框架實現REST服務。
但是在很多人的印象中Web service的話一般指十來年前IBM主導的基于XML的各種交互技術,現在除了一些公司在用之外用得人也很少了。廣義的話Webservice就是Web 服務了,一切皆服務。
2. 不同系統相同語言之間的交互常見的不同系統相同語言之間的交互用RPC(遠程過程調用),或者RMI(遠程方法調用)實現,不用對外部提供服務,當然上面說的也可以使用在相同語言之間的交互,只是我常用的是RPC。
不同產品的架構
3. 單個產品的架構演進一般我們只是一個產品的情況下的架構演進歷程,如果需要對外提供webService,通常使用REST服務實現。
以下一段內容來源于知乎
1. 分布式架構的演進系統架構演化歷程-初始階段架構初始階段 的小型系統 應用程序、數據庫、文件等所有的資源都在一臺服務器上通俗稱為LAMP
特征:應用程序、數據庫、文件等所有的資源都在一臺服務器上。
描述:通常服務器操作系統使用linux,應用程序使用PHP開發,然后部署在Apache上,數據庫使用Mysql,匯集各種免費開源軟件以及一臺廉價服務器就可以開始系統的發展之路了。
2. 系統架構演化歷程-應用服務和數據服務分離好景不長,發現隨著系統訪問量的再度增加,webserver機器的壓力在高峰期會上升到比較高,這個時候開始考慮增加一臺webserver
特征:應用程序、數據庫、文件分別部署在獨立的資源上。
描述:數據量增加,單臺服務器性能及存儲空間不足,需要將應用和數據分離,并發處理能力和數據存儲空間得到了很大改善。
3. 系統架構演化歷程-使用緩存改善性能特征:數據庫中訪問較集中的一小部分數據存儲在緩存服務器中,減少數據庫的訪問次數,降低數據庫的訪問壓力。
描述:系統訪問特點遵循二八定律,即80%的業務訪問集中在20%的數據上。緩存分為本地緩存和遠程分布式緩存,本地緩存訪問速度更快但緩存數據量有限,同時存在與應用程序爭用內存的情況。
4. 系統架構演化歷程-使用應用服務器集群在做完分庫分表這些工作后,數據庫上的壓力已經降到比較低了,又開始過著每天看著訪問量暴增的幸福生活了,突然有一天,發現系統的訪問又開始有變慢的趨勢了,這個時候首先查看數據庫,壓力一切正常,之后查看webserver,發現apache阻塞了很多的請求,而應用服務器對每個請求也是比較快的,看來 是請求數太高導致需要排隊等待,響應速度變慢
特征:多臺服務器通過負載均衡同時向外部提供服務,解決單臺服務器處理能力和存儲空間上限的問題。
描述:使用集群是系統解決高并發、海量數據問題的常用手段。通過向集群中追加資源,提升系統的并發處理能力,使得服務器的負載壓力不再成為整個系統的瓶頸。
5. 系統架構演化歷程-數據庫讀寫分離享受了一段時間的系統訪問量高速增長的幸福后,發現系統又開始變慢了,這次又是什么狀況呢,經過查找,發現數據庫寫入、更新的這些操作的部分數據庫連接的資源競爭非常激烈,導致了系統變慢
特征:多臺服務器通過負載均衡同時向外部提供服務,解決單臺服務器處理能力和存儲空間上限的問題。
描述:使用集群是系統解決高并發、海量數據問題的常用手段。通過向集群中追加資源,使得服務器的負載壓力不在成為整個系統的瓶頸。
6. 系統架構演化歷程-反向代理和CDN加速特征:采用CDN和反向代理加快系統的 訪問速度。
描述:為了應付復雜的網絡環境和不同地區用戶的訪問,通過CDN和反向代理加快用戶訪問的速度,同時減輕后端服務器的負載壓力。CDN與反向代理的基本原理都是緩存。
7. 系統架構演化歷程-分布式文件系統和分布式數據庫隨著系統的不斷運行,數據量開始大幅度增長,這個時候發現分庫后查詢仍然會有些慢,于是按照分庫的思想開始做分表的工作
特征:數據庫采用分布式數據庫,文件系統采用分布式文件系統。
描述:任何強大的單一服務器都滿足不了大型系統持續增長的業務需求,數據庫讀寫分離隨著業務的發展最終也將無法滿足需求,需要使用分布式數據庫及分布式文件系統來支撐。分布式數據庫是系統數據庫拆分的最后方法,只有在單表數據規模非常龐大的時候才使用,更常用的數據庫拆分手段是業務分庫,將不同的業務數據庫部署在不同的物理服務器上。
8. 系統架構演化歷程-使用NoSQL和搜索引擎特征:系統引入NoSQL數據庫及搜索引擎。
描述:隨著業務越來越復雜,對數據存儲和檢索的需求也越來越復雜,系統需要采用一些非關系型數據庫如NoSQL和分數據庫查詢技術如搜索引擎。應用服務器通過統一數據訪問模塊訪問各種數據,減輕應用程序管理諸多數據源的麻煩。
9. 系統架構演化歷程-業務拆分特征:系統上按照業務進行拆分改造,應用服務器按照業務區分進行分別部署。
描述:為了應對日益復雜的業務場景,通常使用分而治之的手段將整個系統業務分成不同的產品線,應用之間通過超鏈接建立關系,也可以通過消息隊列進行數據分發,當然更多的還是通過訪問同一個數據存儲系統來構成一個關聯的完整系統。縱向拆分:將一個大應用拆分為多個小應用,如果新業務較為獨立,那么就直接將其設計部署為一個獨立的Web應用系統縱向拆分相對較為簡單,通過梳理業務,將較少相關的業務剝離即可。橫向拆分:將復用的業務拆分出來,獨立部署為分布式服務,新增業務只需要調用這些分布式服務橫向拆分需要識別可復用的業務,設計服務接口,規范服務依賴關系。
10. 系統架構演化歷程-分布式服務特征:公共的應用模塊被提取出來,部署在分布式服務器上供應用服務器調用。描述:隨著業務越拆越小,應用系統整體復雜程度呈指數級上升,由于所有應用要和所有數據庫系統連接,最終導致數據庫連接資源不足,拒絕服務。
(1) 當服務越來越多時,服務URL配置管理變得非常困難,F5硬件負載均衡器的單點壓力也越來越大。
(2) 當進一步發展,服務間依賴關系變得錯蹤復雜,甚至分不清哪個應用要在哪個應用之前啟動,架構師都不能完整的描述應用的架構關系。
(3) 接著,服務的調用量越來越大,服務的容量問題就暴露出來,這個服務需要多少機器支撐?什么時候該加機器?
(4) 服務多了,溝通成本也開始上升,調某個服務失敗該找誰?服務的參數都有什么約定?
(5) 一個服務有多個業務消費者,如何確保服務質量?
(6) 隨著服務的不停升級,總有些意想不到的事發生,比如cache寫錯了導致內存溢出,故障不可避免,每次核心服務一掛,影響一大片,人心慌慌,如何控制故障的影響面?服務是否可以功能降級?或者資源劣化?
這個好像是大型網站技術架構 核心原理與案例分析開篇的內容,不過作者總結得不錯,我就轉載一下吧。
還有一種就是上面也有提到的業務拆分。現在我們需要做一個產品線,我們只需要一個數據層,一個通用業務邏輯層,前面還有各種應用和界面層,不需要對外部系統(外部公司的系統)提供服務的情況以前我們一般會選擇用EJB等來構建分布式應用,但是現在我們可以使用dobbo、thrift、avro、hessian這類RPC框架來構建分布式應用實現不同應用和數據來源的交互。這種結構模式下我們需要對其他公司提供服務,可以專門寫一個應用對外部系統提供rest服務。一般大多數互聯網服務背后都要訪問十幾個甚至幾百個內部服務,它們之間的通信方式一般都是RPC:就像訪問一個遠程方法那樣,輸入參數后等待返回結果。這對于構建復雜系統是最容易理解的方式。
如下圖的模型,文件系統,緩存那些沒有畫出來,大家理解就行。
結語:不管哪種架構我們都需要做好模塊化(盡量做到模塊復用)。
不要為了架構而架構導致過度設計。
不管何種架構都是為了更好滿足業務需求,架構應該跟隨業務的發展而發展。
當前的架構如果可以滿足當前的業務發展,就可以考慮下一步的擴展了,不用一下子考慮3步4步甚至更多。
以上如果有誤,還望大家不吝賜教!
文章版權歸作者所有,未經允許請勿轉載,若此文章存在違規行為,您可以聯系管理員刪除。
轉載請注明本文地址:http://specialneedsforspecialkids.com/yun/64726.html
摘要:另一個用戶請求過來,負載均衡器指派這個請求到服務器。這樣就平攤了請求這種方式就叫做輪詢策略還有很多種,就看你想怎么實現了,反正這個邏輯的代碼放在負載均衡器上。 前言 只有光頭才能變強。文本已收錄至我的GitHub倉庫,歡迎Star:https://github.com/ZhongFuCheng3y/3y 這本書買了一段時間了,之前在杭州沒帶過去,現在讀完第三章,來做做筆記 showI...
摘要:馬拉松會匹配每個和提供的資源,然后通過將任務下發下去。對外暴露的就是負載均衡的某個服務,后面自動將流量轉發到某個容器的端口上。還有一直辦法是用內網的,這個會維護現有的容器列表端口,并且返回任意一個的端口,頁實現了負載均衡和服務發現功能。 演講嘉賓 數人云COO 謝樂冰 在德國工作十年,回國后加入惠普電信運營商部門,擁有多年項目經驗和創業公司工作經驗。在數人云負責產品售前和運營,專注行...
摘要:表示的是兩個,當其中任意一個計算完并發編程之是線程安全并且高效的,在并發編程中經常可見它的使用,在開始分析它的高并發實現機制前,先講講廢話,看看它是如何被引入的。電商秒殺和搶購,是兩個比較典型的互聯網高并發場景。 干貨:深度剖析分布式搜索引擎設計 分布式,高可用,和機器學習一樣,最近幾年被提及得最多的名詞,聽名字多牛逼,來,我們一步一步來擊破前兩個名詞,今天我們首先來說說分布式。 探究...
閱讀 3490·2019-08-30 15:53
閱讀 3406·2019-08-29 16:54
閱讀 2190·2019-08-29 16:41
閱讀 2397·2019-08-23 16:10
閱讀 3377·2019-08-23 15:04
閱讀 1342·2019-08-23 13:58
閱讀 347·2019-08-23 11:40
閱讀 2452·2019-08-23 10:26