1. 程式人生 > >文字檔案匯入HBase中

文字檔案匯入HBase中

文字檔案匯入到Hbase中

 建立表sudo su -

su - hadoop

./hbase shellcreate 'table1',{NAME => 'DF', VERSIONS => 5}  www.2cto.com 

配置環境

1.修改hadoop環境

 vi /opt/hadoop-1.0.0/conf/hadoop-env.sh

增加如下資訊 export HBASE_HOME=/opt/hbase-0.92.0

export HADOOP_CLASSPATH=$HBASE_HOME/hbase-0.92.0.jar:$HBASE_HOME/hbase-0.92.0-test.jar:$HBASE_HOME/conf:${HBASE_HOME}/lib/zookeeper-

3.4.2.jar:${HBASE_HOME}/lib/guava-r09.jar

 2.拷貝配置檔案和jar包  www.2cto.com  

cp /opt/hbase-0.92.0/hbase-0.92.0.jar /opt/hadoop-1.0.0/lib/

cp /opt/hbase-0.92.0/hbase-0.92.0-tests.jar /opt/hadoop-1.0.0/lib/

cp /opt/hbase-0.92.0/conf/hbase-site.xml /opt/hadoop-1.0.0/conf/ 然後重啟/opt/hadoop-1.0.0/bin/stop-all.sh /opt/hadoop-1.0.0/bin/start-all.sh 

檔案匯入

3. 把檔案匯入到hadoop

hadoop fs -put test1.txt /test1

4.把檔案匯入到hbase

hadoop jar /opt/hbase-0.92.0/hbase-0.92.0.jar importtsv -Dimporttsv.columns=DF:rowNo,HBASE_ROW_KEY table1 /test1