Hadoop筆記03_MapReduce分散式計算框架


MapReduce 分散式計算框架


https://www.researchgate.net/figure/Word-count-program-flow-executed-with-MapReduce-5_fig6_270448794

根據上方「詞頻計算於MapReduce處裡的示意圖」
Splitting: 拆分出各單詞後
Mapping: 又將相同單詞分到同一區域
Shuffling: 重新洗牌
Reducing: 聚合彙總處理,在此就是去加總。
最終輸出詞頻結果




Ref:
https://hackmd.io/@Chang-Chia-Chi/MapReduce

留言

這個網誌中的熱門文章

何謂淨重(Net Weight)、皮重(Tare Weight)與毛重(Gross Weight)

Architecture(架構) 和 Framework(框架) 有何不同?_軟體設計前的事前規劃的藍圖概念

經得起原始碼資安弱點掃描的程式設計習慣培養(五)_Missing HSTS Header