這篇文章主要介紹HDFS架構如何設計,文中介紹的非常詳細,具有一定的參考價值,感興趣的小伙伴們一定要看完!
創新互聯建站專注于企業營銷型網站、網站重做改版、新興網站定制設計、自適應品牌網站建設、HTML5建站、電子商務商城網站建設、集團公司官網建設、外貿網站建設、高端網站制作、響應式網頁設計等建站業務,價格優惠性價比高,為新興等各大城市提供網站開發制作服務。
HDFS架構設計:
1.NN(NameNode):主要是維護管理文件命名空間,其中包括了文件名稱,文件的權限,創建時間,副本數,文件被分成多少塊,快分布在哪些機器(產生文件fsimage和editlog)。
2.理解NN管理下NN和塊以及實際存儲內容的存儲關系。
實例:假設NN為一個容量為128000ML的正方形盒子,每個塊為同樣大小正正方方的容量為128ML的盒子,但是每個盒子里只有3ml的水(每個塊中存儲文件的實際大小)。
則問實際存儲的內容是多少ml?3*(128000/128)=3000ml這里是由DN管理存儲的。
放進去的盒子是多少個?1000個(其實就是存儲的塊的數量)
總的來說盡管實際存儲只有3000ml,但是卻消耗了1000個瓶子的名字的字節總和的NN的空間,但是如果把1000個瓶子壓縮成500或者更少(小文件合并),則可以消耗更少量的NN管理空間。
3.DN(DataNode):存儲數據塊,存儲數據塊校驗和。
4.SN(SecondaryNode):做每小時的檢查工作checkpoint。(檢查NN的工作即產生文件fsimage和editlog并進行打包制作成新的fsimage文件保存下來)
圖理解:
以上是“HDFS架構如何設計”這篇文章的所有內容,感謝各位的閱讀!希望分享的內容對大家有幫助,更多相關知識,歡迎關注創新互聯行業資訊頻道!
當前題目:HDFS架構如何設計
網站URL:http://m.2m8n56k.cn/article4/jdcjoe.html
成都網站建設公司_創新互聯,為您提供自適應網站、面包屑導航、外貿網站建設、搜索引擎優化、虛擬主機、移動網站建設
聲明:本網站發布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創新互聯