close

Pig是一個可以進行資料前處理的工具,之前在課堂上有玩過幾次,不過因為網路上沒有太多相關的安裝文章,所以剛開始有點緊張,不知道安裝上難度會不會很高,後來才發現原來沒想像中的複雜

(用root權限)

wget http://ftp.tc.edu.tw/pub/Apache/pig/pig-0.15.0/pig-0.15.0.tar.gz

tar –xvf pig-0.15.0.tar.gz –C /usr/local

mv /usr/local/pig-0.15.0 /usr/local/pig

chown –R hadoop:hadoop /usr/local/pig

  • 編輯PATH檔案(用hadoop帳號)

sudo nano ~/.bashrc

加入下面內容 :

export PATH=/usr/local/pig/bin:$PATH

export PIG_CLASSPATH=/usr/local/hadoop/etc/hadoop

source ~/.bashrc

  • 檢查是否有成功安裝 pig

pig –help

有看到說明跟版本號就代表安裝成功

  • pig的方式有好幾種:local、mapreduce(預設)還有tez
    1. local模式的pig:

pig –x local

  1. mapreduce模式的pig:

pig –x mapreduce

或是

pig

  • 執行pigLatin的畫面

​​​​​​​

參考資料:Pig官網

 

arrow
arrow
    文章標籤
    Hadoop Raspberrypi Pig
    全站熱搜

    mirage 發表在 痞客邦 留言(0) 人氣()