51Dev开发社区
登录 注册
为你推荐

【HBase】协处理器是什么？又能干什么？怎么用？
目录简单了解官方帮助文档协处理器出现的原因协处理器的分类ObserverEndpointPhoenix协处理器的使用加载方式静态加载动态加载协处理器的卸载协处理器Observer应用实战需求步骤一、HBase当中创建第一张表proc1和第二张表proc2二、开发HBase的协处理器三、将java打成Jar包，上传到HD...
代码星球·2020-08-09

【HBase】带你了解一哈HBase的各种预分区
目录简单了解概述设置预分区一、手动指定预分区二、使用16进制算法生成预分区三、将分区规则写在文本文件中四、使用JavaAPI进行预分区简单了解概述由上图可以看出，每一个表都有属于自己的一个Region，但Region内的数据达到10GB时，会进行分割，但仍会在同一个RegionServer上，而预分区的作用主要是增加数...
代码星球·2020-08-09

【HBase】HBase和Sqoop整合
目录需求一步骤一、修改sqoop配置文件二、在mysql中创建数据库和数据表并插入数据三、将mysql表中的数据导入到HBase表中四、在HBase表中查看数据需求二步骤一、创建hive外部表二、创建hive内部表并将外部表数据插入到内部表三、清空mysql表数据四、通过sqoop将hive内部表的数据导出到Mysql...
代码星球·2020-08-09

【HBase】快速了解上手rowKey的设计技巧
目录为什么要设计rowKey三大原则长度原则散列原则唯一原则热点问题的解决加盐哈希反转时间戳反转为什么要设计rowKey首先要弄明白一点，Regions的分区就是根据数据的rowKey处理的，而如果设计rowKey不合理，就会导致所有数据到一个分区，或者并没有很好地发挥预分区带来的负载均衡作用，还是会发生数据倾斜。HB...
代码星球·2020-08-09

【HBase】快速搞定HBase与Hive的对比、整合
目录对比整合需求一步骤一、将HBase的五个jar包拷贝到Hive的lib目录下二、修改hive的配置文件三、在Hive中建表四、创建hive管理表与HBase映射五、在HBase中查看hbase_score需求二步骤一、在HBase中创建表并插入数据二、建立hive外部表，映射HBase中的表及字段对比整合需求一将h...
代码星球·2020-08-09

hive元数据报错？试了很多方法都没辙？也许你漏了这一步
进入hiveCLI后，输入showdatabases;显示FAILED:SemanticExceptionorg.apache.hadoop.hive.ql.metadata.HiveException:java.lang.RuntimeException:Unabletoinstantiateorg.apache.h...
代码星球·2020-08-09

【HBase】HBase与MapReduce集成——从HDFS的文件读取数据到HBase
目录需求步骤一、创建maven工程，导入jar包二、开发MapReduce程序三、结果需求将HDFS路径/hbase/input/user.txt文件的内容读取并写入到HBase表myuser2中首先在HDFS上准备些数据让我们用hdfsdfs-mkdir-p/hbase/inputcd/export/servers/...
代码星球·2020-08-09

【HBase】HBase与MapReduce的集成案例
目录需求步骤一、创建maven工程，导入jar包二、开发MapReduce程序三、运行结果HBase与MapReducer集成官方帮助文档：http://archive.cloudera.com/cdh5/cdh/5/hbase-1.2.0-cdh5.14.0/book.html需求在HBase先创建一张表myuser...
代码星球·2020-08-09

【HBase】底层原理
目录系统架构表数据模型物理存储系统架构在文章【HBase】基本介绍和基础架构中已经有简单介绍Client——包含访问hbase的接口，client维护着一些cache来加快对hbase的访问，比如region的位置信息。Zookeeper：1.保证任何时候，集群中只有一个master2.存贮所有Region的寻址入口-...
代码星球·2020-08-09

【HBase】Java实现过滤器查询
目录概述代码实现rowKey过滤器RowFilter列族过滤器FamilyFilter列过滤器QualifierFilter列值过滤器ValueFilter专用过滤器单列值过滤器SingleColumnValueFilter列值排除过滤器SingleColumnValueExcludeFilterrowKey前缀过滤器...
代码星球·2020-08-09

【Hadoop离线基础总结】Hadoop High AvailabilityHadoop基础环境增强
目录简单介绍HadoopHA概述集群搭建规划集群搭建第一步：停止服务第二步：启动所有节点的ZooKeeper第三步：更改配置文件第四步：启动服务简单介绍HadoopHA概述HA(HighAvailable)——高可用，是保证业务连续性的有效解决方案。一般有两个或两个以上的节点，分为活动节点（Active）及备用节点（S...
代码星球·2020-08-09

【HBase】通过Java代码实现HBase数据库中数据的增删改查
目录创建maven工程，导入jar包java代码实现创建hbase表java代码实现向hbase表中插入数据java代码查询hbase数据使用rowKey查询指定列族指定列的值通过startRowKey和endRowKey进行扫描创建maven工程，导入jar包<repositories><repos...
代码星球·2020-08-09

【HBase】表模型和基本操作介绍
目录HBase表模型常用Shell操作HBase表模型创建一个hbase表，必须要有表名和列族名列族——columnFamily，就是上图中的ColumnFamily1userInfostore1store2、ColumnFamily2addressInfostore3等列——column，就相当于mysql和hive...
代码星球·2020-08-09

【HBase】集群搭建/安装部署
目录第一步：下载对应的HBase安装包第二步：上传压缩包并解压第三步：修改配置文件第四步：安装包分发到另外两台机器第五步：三台机器创建软连接第六步：三台机器添加环境变量第七步：启动HBase集群第八步：页面访问HBase强依赖于ZooKeeper和Hadoop，所以安装之前一定要保证两个服务正常运行第一步：下载对应的H...
代码星球·2020-08-09

【HBase】HBase基本介绍和基础架构
目录基本介绍概述特点HBase和Hadoop的关系RDBMS与HBase的对比特征基础架构基本介绍概述HBase是bigtable的开源java版本，是建立在HDFS之上，提供高可靠性、高性能、列存储、可伸缩、实时读写nosql的数据库系统，主要用来存储结构化和半结构化的松散数据。HBase查询数据功能很简单，不支持j...
代码星球·2020-08-09
首页上一页...50835084508550865087...下一页尾页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他