SCALAの記事一覧

Top / Scala / Hadoop

目次

Hadoopとは

http://ja.wikipedia.org/wiki/Hadoop

巨大なファイルシステムってことで理解してていいんじゃないかな?

Apache版 Hadoop

http://hadoop.apache.org/

紹介記事

http://d.hatena.ne.jp/stanaka/20091125/1259124272

MapReduce?とは

Map処理, シャッフル, Reduce処理の3つの手順から構成されている.

抽出する. 全てのMap処理は並列実行することができる.

Mapによって作られたデータを整理し, データを任意の順に並べ替える.

データをまとめて最終的に手に入れたい結果を作り上げるプロセスで, データ全体についての整理された処理結果を得る.

MapReduce?が有効に働く処理

トップ   編集 凍結 差分 バックアップ 添付 複製 名前変更 リロード   新規 一覧 単語検索 最終更新   ヘルプ   最終更新のRSS
Last-modified: 2010-06-04 (金) 12:57:02 (2965d)