1. 程式人生 > >總結:單機與分散式

總結:單機與分散式

傳統計算方案演變

1、單機並行運算

1,開啟資料來源
2,統計出有多少個檔案。
3,為每個檔案執行相同的統計命令
4,等待所有命令執行成功。
5,合併統計後結果輸出或執行進一步統計

2、分散式並行運算

1,開啟資料來源(分散式儲存或公共路徑)
2,統計出有多少個檔案,為每臺機器分配響應的統計任務
3,每個任務執行相同的運算,並將結果返回到中心機彙總
4,合併統計後結果輸出或