HBase0.96数据导入和Kettle处理HBase问题
发布时间
阅读量:
阅读量
版本:
cdh5.0.0+hadoop2.3.0+hbase0.96.1.1+Spoon5.0.1
一、HBase数据导入
HBase数据的导入操作主要依托于org.apache.hadoop.hbase.mapreduce.ImportTsv工具,其提供了两种不同的实现方式。第一种方式为直接导入数据,第二种方式则需先将原始数据转换为HFile格式,再执行导入过程。
1. HDFS中存储的数据(部分内容)如下:
[root@node33 data]# hadoop fs -ls /input
Found 1 items
-rwxrwxrwx 1 hdfs supergroup 13245467 2014-05-01 17:09 /input/hbase-data.csv
[root@node33 data]# hadoop fs -cat /input/* | head -n 3
1,1.52101,13.64,4.49,1.1,71.78,0.06,8.75,0,0,1
2,1.51761,13.89,3.6,1.36,72.73,0.48,7.83,0,0,1
3,1.51618,13.53,3.55,1.54,72.99,0.39,7.78,0,0,1
- 采用直接导入的方法
a
全部评论 (0)
还没有任何评论哟~
