close
Pig是一個可以進行資料前處理的工具,之前在課堂上有玩過幾次,不過因為網路上沒有太多相關的安裝文章,所以剛開始有點緊張,不知道安裝上難度會不會很高,後來才發現原來沒想像中的複雜
(用root權限)
wget http://ftp.tc.edu.tw/pub/Apache/pig/pig-0.15.0/pig-0.15.0.tar.gz
tar –xvf pig-0.15.0.tar.gz –C /usr/local
mv /usr/local/pig-0.15.0 /usr/local/pig
chown –R hadoop:hadoop /usr/local/pig
- 編輯PATH檔案(用hadoop帳號)
sudo nano ~/.bashrc
加入下面內容 :
export PATH=/usr/local/pig/bin:$PATH
export PIG_CLASSPATH=/usr/local/hadoop/etc/hadoop
source ~/.bashrc
- 檢查是否有成功安裝 pig
pig –help
有看到說明跟版本號就代表安裝成功
- pig的方式有好幾種:local、mapreduce(預設)還有tez
- local模式的pig:
pig –x local
- mapreduce模式的pig:
pig –x mapreduce
或是
pig
- 執行pigLatin的畫面
參考資料:Pig官網
文章標籤
全站熱搜
留言列表