MapReduce 演算法是什麼 ?

分享:
這個 MapReduce 演算法 ( Wikipedia 上是用  Framework )是源自 Google 在  2004 所發表的一篇叫做「MapReduce: Simplified Data Processing on Large Clusters」的論文,就如它的標題所說的一樣,這是一個用在大型叢集環境處理的大量資料的一種軟體架構,是 Google 用在它的搜尋技術的演算法之一。演算法 ?? 好遙遠的東西哩 ! 不過拜雲端運算興盛之賜,這種演算法己經充斥在我們的身邊,而且是快到了隨處可得的程式了。

Python 內建就有 map() 和 reduce() 函數可以用,也有人寫好的  octo.py 可以用,Ruby 有 starfish 可用,PHP 有 PHPMapReduce 可用,而 Java....就用 Hadoop 吧 !!
分享:

沒有留言 :