2017-03-05暂时使用这种方法：命令：#sshroot@172.18.32.XXX//之后输入密码链接hadoop成功：接下来在这样的情况下操作：[root@hadoop0～]#  其中hadoop0是集群的主机（不知道怎么称呼）查看hadoop0的文件#hadoopfs-lshdfs://1...

MapReduce:详解Shuffle过程这篇文章详细介绍了map和reduce的过程（2017-03-03）需要再看一遍，把这个过程，按照自己的理解写一遍...

多亏这篇博客给的指导数据：使用的文章给出的数据，保存在/home/amelie/Haddoop_file/ncdc.txt环境：ubuntu16.04LTS，hadoop伪分布式使用eclipse，新建一个Map/Reduceproject（我感觉普通的project也可以），名字为Chap2在目录src目录下新建pa...

使用命令sshroot@172.18.32.177连接hahoop0集群...

参考ant安装目录/usr/apache-ant-1.9.7成功安装ant在PC端给eclipse安装hadoop插件，连接另一台电脑的hadoop伪分布式。未成功[忧伤][忧伤]...

1.打开hadoop的目录，接下来都是在下面目录下操作cd/usr/local/hadoop/hadoop-2.5.2//hadoop安装目录2.启动hadoop./sbin/start-all.sh3.hadoop文件暂存目录/home/amelie/Hadoop_file4.将以上目录的文件存入hdfs下hadoo...

在eclipse上做好一切，在网上很容易搜到尝试链接hadoop集群失败，尝试单机的操作，发现#sshlocalhost失败解决ssh问题：成功解决但是eclipse的DFSlocation文件夹下为空：可能原因：处于安全模式 很使用的文章：怎么安装hadoop集群  Hadoop2.2....

eclipse:安装路径/usr/local/eclipsehadoop-2.5.2/usr/local/hadoop/hadoop-2.5.2hadoop2x-eclipse-plugin-master已经下载到下载文件夹//以上文件都是从官网下载ant1.9.7 安装位置/esr/local/ ...

flume1.6安装1.解压2.复制　　cpconf/flume-conf.properties.templateconf/flume.conf　　cpconf/flume-env.sh.templateconf/flume-env.sh3.修改JAVA_HOME　　flume-env.sh4.检验安装　　flume-...

项目描述：今天花了680元买了阿里云的一台内存1G,带宽1M的云主机.想以后方便测试用,而且想把自己的博客签到自己的主机上.所以自己就搭了一个测试的环境.可以用来进行基本的hbase入库,hadoop mrjob的运行.步骤：1.配置JDK我的安装路径如下:/usr/local/java/jdk1.7.0_7...

 1.Hbase根据rowkey查询conf的配置信息如下：conf=newConfiguration();conf.set("hbase.zookeeper.quorum","192.168.50.253:2181");conf.set("hbase.rootdir","hdfs://192.168.50....

1.注意问题：1.在开发过程中一定要导入hbase源码中的lib库否则出现如下错误TableMapReducUtil找不到什么……2.编码：importjava.io.IOException;importjava.text.ParseException;importjava.text.SimpleDateFormat;...

一、常用命令：(hbaseshell进入终端)1.创建表：create'users','user_id','address','info'表users,有三个列族user_id,address,info2.列出全部表list3.得到标的信息describe‘users’4.删除表disable'users'drop'u...

加入一个新的存储节点和删除一个计算节点需要刷新集群状态命令方式1：静态添加datanode，停止namenode方式1.停止namenode2.修改slaves文件，并更新到各个节点3.启动namenode4.执行hadoopbalance命令。（此项为balance集群使用，如果只是添加节点，则此步骤不需要）----...

Hivemysql的metastore安装准备（***掌握***）在nameNode1机子上实践：把hive-0.12.0.tar.gz解压到/itcast/#tar-zxvfhive-0.12.0.tar.gz-C/itcast修改/etc/profile文件，将hive加入环境变量#vim/etc/profilee...