由計算機組成的網(wǎng)絡(luò)無處不在,現(xiàn)如今我們的日常生活已經(jīng)被各種不同類型的網(wǎng)絡(luò)包圍,如電話網(wǎng)絡(luò)、企業(yè)網(wǎng)絡(luò)、家庭網(wǎng)絡(luò)以及各種類型的局域網(wǎng),共同構(gòu)成了我們稱之為Internet的網(wǎng)絡(luò)。因此,我們可以斷言Internet是由各種不同類型、不同地區(qū)、不同領(lǐng)域的網(wǎng)絡(luò)構(gòu)成的互聯(lián)網(wǎng)。我們可以發(fā)現(xiàn),互聯(lián)網(wǎng)并沒有集中式的控制中心,而是由大量分離且互聯(lián)的節(jié)點組成的。這正是一個分散式的模型。我們可以把這個概念類比到即將講解的分布式概念上。
成都創(chuàng)新互聯(lián)公司專注為客戶提供全方位的互聯(lián)網(wǎng)綜合服務(wù),包含不限于成都網(wǎng)站建設(shè)、網(wǎng)站建設(shè)、秦都網(wǎng)絡(luò)推廣、微信小程序開發(fā)、秦都網(wǎng)絡(luò)營銷、秦都企業(yè)策劃、秦都品牌公關(guān)、搜索引擎seo、人物專訪、企業(yè)宣傳片、企業(yè)代運營等,從售前售中售后,我們都將竭誠為您服務(wù),您的肯定,是我們最大的嘉獎;成都創(chuàng)新互聯(lián)公司為所有大學(xué)生創(chuàng)業(yè)者提供秦都建站搭建服務(wù),24小時服務(wù)熱線:18980820575,官方網(wǎng)址:www.cdcxhl.com
分布式概念是在網(wǎng)絡(luò)這個大前提下誕生的。傳統(tǒng)的計算是集中式的計算,使用計算能力強大的服務(wù)器處理大量的計算任務(wù),但這種超級計算機的建造和維護成本極高,且明顯存在很大的瓶頸。與之相對,如果一套系統(tǒng)可以將需要海量計算能力才能處理的問題拆分成許多小塊,然后將這些小塊分配給同一套系統(tǒng)中不同的計算節(jié)點進行處理,最后如有必要將分開計算的結(jié)果合并得到最終結(jié)果,那么就將這種系統(tǒng)稱為分布式系統(tǒng)。對于這種系統(tǒng)來說,我們會采用多種方式在不同節(jié)點之間進行數(shù)據(jù)通信和協(xié)調(diào),而網(wǎng)絡(luò)消息則是常用手段之一。
通過以上描述,我們基本可以認為,一套分布式系統(tǒng)會使用網(wǎng)絡(luò)上的硬件資源和軟件組件進行計算,而各個計算節(jié)點間通過一定方式進行通信。這是從計算機科學(xué)的角度簡單概述了分布式系統(tǒng)的概念。
如果我們從網(wǎng)絡(luò)這個關(guān)鍵因素考慮,我們可以將計算分攤到網(wǎng)絡(luò)中不同的計算節(jié)點,充分利用網(wǎng)絡(luò)中的計算資源,而這些節(jié)點可能存在于不同的區(qū)域中,在空間上存在一定距離。雖說這種解釋不那么正式,但也從另一個角度上生動地闡述了分布式的基本特性,即節(jié)點分布。
本書以最基本的云計算與大數(shù)據(jù)概念作為引子,逐步引入高性能分布式實時處理系統(tǒng)編程所需要的知識,抽絲剝繭地把有關(guān)實時處理系統(tǒng)的架構(gòu)以及內(nèi)部實現(xiàn)娓娓道來。
第1章?介紹分布式系統(tǒng)的一些基本概念,以及開發(fā)實時處理系統(tǒng)所需要具備的一些重要知識點。
第2章?介紹分布式系統(tǒng)通信基礎(chǔ),包括TCP/IP以及Socket方面的基本概念,為后續(xù)開發(fā)網(wǎng)絡(luò)庫Meshy做知識儲備。
第3章?介紹分布式系統(tǒng)通信所需的高層抽象,包括RPC遠程過程調(diào)用、RESTful.消息隊列等常用的通信模型。同時介紹基本的序列化概念與解決方案,并使用Thrit開發(fā)簡單的公告牌服務(wù),為Hurricane的開發(fā)建立通信抽象與框架上的基礎(chǔ)概念。
第4章?介紹C++高性能編程所需的基礎(chǔ)與進階知識,包括C+ +中的內(nèi)存資源管理、編碼解決方案、并發(fā)與異步處理以及內(nèi)存管理技巧,以及C++11中與內(nèi)存管理、編碼處理、線程模型相關(guān)的內(nèi)容。
第5章?介紹分布式處理系統(tǒng)的基本概念,包括批處理與實時處理的區(qū)別,Hadoop與Storm的基本介紹及基本模型。最后介紹可靠消息處理的基本思想。
第6章?介紹實時處理系統(tǒng)的總體架構(gòu)與接口設(shè)計,包括消息源、消息處理器、數(shù)據(jù)收集器、元組以及序列化接口。
第7章?介紹服務(wù)組件的設(shè)計與實現(xiàn),包括Executor及其消息隊列、動態(tài)裝載以及Task的設(shè)計與實現(xiàn)等。
第8章?介紹管理服務(wù)的設(shè)計與實現(xiàn),其中包括集群管理器President以及節(jié)點管理器Manager的架構(gòu)設(shè)計與編程實現(xiàn)。
第9章?介紹實時處理系統(tǒng)中各部分接口的實現(xiàn),包括消息源、消息處理單元以及數(shù)據(jù)收集器的實現(xiàn)。
由于平臺篇幅限制,同時也為了大家更好的閱讀,小編把分布式相關(guān)的資料都整理好了,有感興趣的朋友可幫忙轉(zhuǎn)發(fā)文章后,關(guān)注私信 回復(fù)【學(xué)習(xí)】來獲取