软件下载吧文章资讯

分类分类

通用MapReduce程序复制HBase表数据

2024-03-09 11:51作者:下载吧

编写MR程序,让其可以适合大部分的HBase表数据导入到HBase表数据。其中包括可以设置版本数、可以设置输入表的列导入设置(选取其中某几列)、可以设置输出表的列导出设置(选取其中某几列)。

原始表test1数据如下:

通用MapReduce程序复制HBase表数据

每个row key都有两个版本的数据,这里只显示了row key为1的数据

 在hbase shell 中创建数据表:

create ‘test2’,{NAME => ‘cf1’,VERSIONS => 10} // 保存无版本、无列导入设置、无列导出设置的数据
create ‘test3’,{NAME => ‘cf1’,VERSIONS => 10} // 保存无版本、无列导入设置、有列导出设置的数据
create ‘test4’,{NAME => ‘cf1’,VERSIONS => 10} // 保存无版本、有列导入设置、无列导出设置的数据
create ‘test5’,{NAME => ‘cf1’,VERSIONS => 10} // 保存有版本、无列导入设置、无列导出设置的数据
create ‘test6’,{NAME => ‘cf1’,VERSIONS => 10} // 保存有版本、无列导入设置、有列导出设置的数据
create ‘test7’,{NAME => ‘cf1’,VERSIONS => 10} // 保存有版本、有列导入设置、无列导出设置的数据
create ‘test8’,{NAME => ‘cf1’,VERSIONS => 10} // 保存有版本、有列导入设置、有列导出设置的数据

展开全部

相关文章

说两句网友评论
    我要跟贴
    取消