#HBase

Ubuntu 12.04上安装HBase并运行

作者:凯鲁嘎吉-博客园 http://www.cnblogs.com/kailugaji/在官网上下载HBase-1.1.2,将其解压到/home/wrr文件夹下配置环境变量wrr@ubuntu:~$sudogedit~/.bashrc[sudo]passwordforwrr:wrr@ubuntu:~$sou...

就没有我遇不到的报错!java.lang.NoClassDefFoundError: org/apache/hadoop/hbase/filter/Filter

本来准备用HBase的Bulkload将HDFS的HFile文件导入到HBase的myuser2表中,用的是yarnjar的命令yarnjar/export/servers/hbase-1.2.0-cdh5.14.0/lib/hbase-server-1.2.0-cdh5.14.0.jarcompletebulkloa...

【HBase】通过Bulkload批量加载数据到Hbase表中

目录需求步骤一、开发MapReduce二、打成Jar包放到linux执行三、有两种办法将HFile文件加载到HBase表中开发代码Hadoop命令运行需求将hdfs上面的这个路径/hbase/input/user.txt的数据文件,转换成HFile格式,然后load到myuser2表里面去先清空一下myuser2表的数...

【HBase】HBase和Hue的整合

目录一、修改hue.ini配置文件二、启动HBase的thriftserver服务三、启动Hue四、页面访问一、修改hue.ini配置文件cd/export/servers/hue-3.9.0-cdh5.14.0/desktop/confvimhue.ini[hbase]hbase_clusters=(Cluster|...
代码星球 ·2020-08-09

【HBase】协处理器是什么?又能干什么?怎么用?

目录简单了解官方帮助文档协处理器出现的原因协处理器的分类ObserverEndpointPhoenix协处理器的使用加载方式静态加载动态加载协处理器的卸载协处理器Observer应用实战需求步骤一、HBase当中创建第一张表proc1和第二张表proc2二、开发HBase的协处理器三、将java打成Jar包,上传到HD...

【HBase】带你了解一哈HBase的各种预分区

目录简单了解概述设置预分区一、手动指定预分区二、使用16进制算法生成预分区三、将分区规则写在文本文件中四、使用JavaAPI进行预分区简单了解概述由上图可以看出,每一个表都有属于自己的一个Region,但Region内的数据达到10GB时,会进行分割,但仍会在同一个RegionServer上,而预分区的作用主要是增加数...

【HBase】快速了解上手rowKey的设计技巧

目录为什么要设计rowKey三大原则长度原则散列原则唯一原则热点问题的解决加盐哈希反转时间戳反转为什么要设计rowKey首先要弄明白一点,Regions的分区就是根据数据的rowKey处理的,而如果设计rowKey不合理,就会导致所有数据到一个分区,或者并没有很好地发挥预分区带来的负载均衡作用,还是会发生数据倾斜。HB...

【HBase】HBase和Sqoop整合

目录需求一步骤一、修改sqoop配置文件二、在mysql中创建数据库和数据表并插入数据三、将mysql表中的数据导入到HBase表中四、在HBase表中查看数据需求二步骤一、创建hive外部表二、创建hive内部表并将外部表数据插入到内部表三、清空mysql表数据四、通过sqoop将hive内部表的数据导出到Mysql...
代码星球 ·2020-08-09

【HBase】快速搞定HBase与Hive的对比、整合

目录对比整合需求一步骤一、将HBase的五个jar包拷贝到Hive的lib目录下二、修改hive的配置文件三、在Hive中建表四、创建hive管理表与HBase映射五、在HBase中查看hbase_score需求二步骤一、在HBase中创建表并插入数据二、建立hive外部表,映射HBase中的表及字段对比整合需求一将h...

【HBase】HBase与MapReduce集成——从HDFS的文件读取数据到HBase

目录需求步骤一、创建maven工程,导入jar包二、开发MapReduce程序三、结果需求将HDFS路径/hbase/input/user.txt文件的内容读取并写入到HBase表myuser2中首先在HDFS上准备些数据让我们用hdfsdfs-mkdir-p/hbase/inputcd/export/servers/...

【HBase】HBase与MapReduce的集成案例

目录需求步骤一、创建maven工程,导入jar包二、开发MapReduce程序三、运行结果HBase与MapReducer集成官方帮助文档:http://archive.cloudera.com/cdh5/cdh/5/hbase-1.2.0-cdh5.14.0/book.html需求在HBase先创建一张表myuser...
代码星球 ·2020-08-09

【HBase】底层原理

目录系统架构表数据模型物理存储系统架构在文章【HBase】基本介绍和基础架构中已经有简单介绍Client——包含访问hbase的接口,client维护着一些cache来加快对hbase的访问,比如region的位置信息。Zookeeper:1.保证任何时候,集群中只有一个master2.存贮所有Region的寻址入口-...
代码星球 ·2020-08-09

【HBase】Java实现过滤器查询

目录概述代码实现rowKey过滤器RowFilter列族过滤器FamilyFilter列过滤器QualifierFilter列值过滤器ValueFilter专用过滤器单列值过滤器SingleColumnValueFilter列值排除过滤器SingleColumnValueExcludeFilterrowKey前缀过滤器...

【HBase】通过Java代码实现HBase数据库中数据的增删改查

目录创建maven工程,导入jar包java代码实现创建hbase表java代码实现向hbase表中插入数据java代码查询hbase数据使用rowKey查询指定列族指定列的值通过startRowKey和endRowKey进行扫描创建maven工程,导入jar包<repositories><repos...

【HBase】表模型和基本操作介绍

目录HBase表模型常用Shell操作HBase表模型创建一个hbase表,必须要有表名和列族名列族——columnFamily,就是上图中的ColumnFamily1userInfostore1store2、ColumnFamily2addressInfostore3等列——column,就相当于mysql和hive...
首页上一页...45678...下一页尾页