#大屏可视化数据

大数据学习——Kafka集群部署

1下载安装包 2解压安装包tar-zxvfkafka_2.11-0.9.0.1.tgzmvkafka_2.11-0.9.0.1kafka 3修改配置文件 cpserver.properties server.properties.bak#LicensedtotheApacheSo...

大数据学习——Storm+Kafka+Redis整合

1pom.xml<?xmlversion="1.0"encoding="UTF-8"?><projectxmlns="http://maven.apache.org/POM/4.0.0"xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"xsi:s...

大数据学习——Storm集群搭建

  安装storm之前要安装zookeeper一.安装storm步骤1.下载安装包2.解压安装包tar-zxvfapache-storm-0.9.6.tar.gzmvapache-storm-0.9.6storm  3.修改配置文件mv/root/apps/storm/conf/...

大数据学习——Storm学习单词计数案例

 需求:计算单词在文档中出现的次数,每出现一次就累加一次 遇到的问题 这个问题是<scope>provided</scope>作用域问题https://www.cnblogs.com/biehongli/p/8316885.html 这个问题是需要把从文件...

大数据学习——hbase的shell客户端基本使用

1 基本shell命令1在hbase的bin目录下进入命令行./hbaseshell2查看有哪些表list3创建一个表create't_user_info',{NAME=>'base_info'},{NAME=>'extra_info',VERSIONS=>2};4用list查看5添加数据p...

大数据学习——hbase数据库

一第一步准备:搭建hadoop集群,搭建zookeeper二第二步:上传安装包解压1tar-zxvf  hbase-1.2.1-bin.tar.gz重命名2mvhbase-1.2.1hbase 删除不需要的文件3rm-rfdocs4修改conf的相关配置 hadoop的hdfs-...
代码星球 ·2021-02-17

大数据学习——sql练习

1、现有如下的建表语句和数据:建表语句createtablestudent(Snoint,Snamestring,Sexstring,Sageint,Sdeptstring)rowformatdelimitedfieldsterminatedby','storedastextfile;createtablecourse...
代码星球 ·2021-02-17

大数据学习——hive的sql练习题

ABC三个hive表每个表中都只有一列int类型且列名相同,求三个表中互不重复的数createtablea(ageint)rowformatdelimitedfieldsterminatedby',';createtableb(ageint)rowformatdelimitedfieldsterminatedby','...

大数据学习——Hbase

1、简介hbase是bigtable的开源java版本。是建立在hdfs之上,提供高可靠性、高性能、列存储、可伸缩、实时读写nosql的数据库系统。它介于nosql和RDBMS之间,仅能通过主键(rowkey)和主键的range来检索数据,仅支持单行事务(可通过hive支持来实现多表join等复杂操作)。 主...
代码星球 ·2021-02-17

大数据学习——azkaban工作流调度系统

azkaban的安装部署 在/root/apps1目录下新建azkaban文件夹上传安装包到azkaban2解压tar-zxvfazkaban-web-server-2.5.0.tar.gz3删掉安装包[root@mini1azkaban]#rm-rfazkaban-executor-server-2.5.0...

sqoop导数据出现问题

执行下面命令的时候报错./sqoopimport--connectjdbc:mysql://mini1:3306/userdb--usernameroot--password123456--tableemp--m1 ERRORmanager.SqlManager:Errorexecutingstatement...
代码星球 ·2021-02-17

大数据学习——sqoop导出数据

把数据从hadoop导出到关系型数据库 将数据从HDFS导出到RDBMS数据库导出前,目标表必须存在于目标数据库中。u 默认操作是从将文件中的数据使用INSERT语句插入到表中u 更新模式下,是生成UPDATE语句更新表数据语法以下是export命令语法。$sqoopexport(gene...
代码星球 ·2021-02-17

大数据学习——sqoop导入数据

把数据从关系型数据库导入到hadoop启动sqoop 导入表表数据到HDFS下面的命令用于从MySQL数据库服务器中的emp表导入HDFS。sqoopimport--connectjdbc:mysql://mini1:3306/userdb--usernameroot--password123456--tab...
代码星球 ·2021-02-17

大数据学习——sqoop安装

1上传  sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz2解压 tar-zxvfsqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz3重命名mvsqoop-1.4.6.bin__hadoop-2.0.4-alphasqo...
代码星球 ·2021-02-17

大数据学习——sqoop入门

下载地址https://pan.baidu.com/s/1qWDl29L9I_KVU54c0ioNfQ fvfhsqoop是apache旗下一款“Hadoop和关系数据库服务器之间传送数据”的工具。导入数据:MySQL,Oracle导入数据到Hadoop的HDFS、HIVE、HBASE等数据存储系统;导出数据...
代码星球 ·2021-02-17
首页上一页...4546474849...下一页尾页