1. 程式人生 > >1.HDFS儲存

1.HDFS儲存

1.HDFS是hadoop的分散式檔案系統。

特性:(1)HADFS是基於java的一個分散式檔案系統。

        (2)基於unix/Linux的操作

        (3)是hadoop的最重要的核心元件(可以理解為儲存即基礎)

          (4)支援順序寫入,而非隨機定位書寫。

HDFS的設計前提以及設計目標:

(1)HDFS適合儲存大的檔案,單個檔案儲存達到百M以上。

(2)硬體容錯,並且是基於普通機器搭建的,因此容錯性比較高。

(3)錯誤監測,自動恢復,快速是HDFS一個重要的目標。

(4)為資料批處理而設計的,因此關注資料的高吞吐量。

(5)簡單的一致性模型,一次寫入,多次讀取。

(6)一個檔案經過建立寫入關閉之後,就不需要改變

(7)使用本地進項計算。