Advertisement

HBase0.96数据导入和Kettle处理HBase问题

阅读量:

版本:

cdh5.0.0+hadoop2.3.0+hbase0.96.1.1+Spoon5.0.1

一、HBase数据导入

HBase数据的导入操作主要依托于org.apache.hadoop.hbase.mapreduce.ImportTsv工具,其提供了两种不同的实现方式。第一种方式为直接导入数据,第二种方式则需先将原始数据转换为HFile格式,再执行导入过程。

1. HDFS中存储的数据(部分内容)如下:

复制代码
    [root@node33 data]# hadoop fs -ls /input
    Found 1 items
    -rwxrwxrwx   1 hdfs supergroup   13245467 2014-05-01 17:09 /input/hbase-data.csv
    [root@node33 data]# hadoop fs -cat /input/* | head -n 3
    1,1.52101,13.64,4.49,1.1,71.78,0.06,8.75,0,0,1
    2,1.51761,13.89,3.6,1.36,72.73,0.48,7.83,0,0,1
    3,1.51618,13.53,3.55,1.54,72.99,0.39,7.78,0,0,1
  1. 采用直接导入的方法

a

全部评论 (0)

还没有任何评论哟~