Changes between Version 5 and Version 6 of Pig


Ignore:
Timestamp:
11/11/09 13:48:06 (10 years ago)
Author:
kosuke
Comment:

--

Legend:

Unmodified
Added
Removed
Modified
  • Pig

    v5 v6  
    33作者:kosuke 
    44 
    5 参考: オライリー Hadoop p301〜 
     5参考文献:Tom White(2009/6/16) Hadoop: The Definitive Guide O'REILLY 501pp 
    66 
    77 Pigは、mapperやreducerなどを書かなくても大規模なデータを分析できるスクリプト言語である(SQLのように扱える)。Pig独自の処理モデルがあるわけではなく、MapReduceで処理している(hadoopモードのみ)。自動的にMapReduceを実行してくれるのでユーザーが心配することはない。しかし、Pigのデータ構造は、主に元のデータに意味づけやネストされたものである。よって、ユーザーはデータを扱いやすくなる。 MapperやReducerが苦手な人のためのものではなく、簡単にデータを分析したいときに使う。また、Pigはクライアントで動くアプリケーションなので、hadoopクラスター側にはなにもインストールする必要がない。以下の環境で動作する。