#op

远程hadoop集群方法

2017-03-05暂时使用这种方法:命令:#sshroot@172.18.32.XXX//之后输入密码链接hadoop成功:接下来在这样的情况下操作:[root@hadoop0~]#  其中hadoop0是集群的主机(不知道怎么称呼)查看hadoop0的文件#hadoopfs-lshdfs://1...
代码星球 代码星球·2020-04-08

有关hadoop知识的记录

MapReduce:详解Shuffle过程这篇文章详细介绍了map和reduce的过程(2017-03-03)需要再看一遍,把这个过程,按照自己的理解写一遍...
代码星球 代码星球·2020-04-08

hadoop权威指南第二章练习

多亏这篇博客给的指导数据:使用的文章给出的数据,保存在/home/amelie/Haddoop_file/ncdc.txt环境:ubuntu16.04LTS,hadoop伪分布式使用eclipse,新建一个Map/Reduceproject(我感觉普通的project也可以),名字为Chap2在目录src目录下新建pa...

ubuntu连接windows的hadoop集群

使用命令sshroot@172.18.32.177连接hahoop0集群...

hadoop的eclipse连接-PC端

参考ant安装目录/usr/apache-ant-1.9.7成功安装ant在PC端给eclipse安装hadoop插件,连接另一台电脑的hadoop伪分布式。未成功[忧伤][忧伤]...
代码星球 代码星球·2020-04-08

Hadoop的wordcount代码实现

1.打开hadoop的目录,接下来都是在下面目录下操作cd/usr/local/hadoop/hadoop-2.5.2//hadoop安装目录2.启动hadoop./sbin/start-all.sh3.hadoop文件暂存目录/home/amelie/Hadoop_file4.将以上目录的文件存入hdfs下hadoo...

安装eclipse的hadoop开发环境--2

在eclipse上做好一切,在网上很容易搜到尝试链接hadoop集群失败,尝试单机的操作,发现#sshlocalhost失败解决ssh问题:成功解决但是eclipse的DFSlocation文件夹下为空:可能原因:处于安全模式 很使用的文章:怎么安装hadoop集群  Hadoop2.2....

安装eclipse的hadoop开发环境

eclipse:安装路径/usr/local/eclipsehadoop-2.5.2/usr/local/hadoop/hadoop-2.5.2hadoop2x-eclipse-plugin-master已经下载到下载文件夹//以上文件都是从官网下载ant1.9.7 安装位置/esr/local/ ...

多年经验【Parallels Desktop14.0.1 永久激活 】版 推荐苹果mac 虚拟机pmg序列号

parallelsdesktop14mac激活码       parallels13免费密钥parallelsdesktop14激活码 很多用MAC的朋友发现平时离不开Windows,怎么办呢?可以尝试使用MAC上的虚拟机.今天我16年买的...

parallels desktop for mac安装虚拟机 之parallelsdesktop密钥 以及 parallels desktop安装win10的办公推荐可以提高办公效率

 大家好我是一个老程序员了.用惯了mac,平时工作都是在 mac安装虚拟机,之后就是mac安装win10.因为很多办公软件mac都不好用,主要是跟同事沟通不方便,当然mac的软件还是很好用的.希望5年后可以普及吧.我讲一下我的工作方式: 我是在mac安装虚拟机,之后就是mac安装win10...

hadoop之 flume1.6安装

flume1.6安装1.解压2.复制  cpconf/flume-conf.properties.templateconf/flume.conf  cpconf/flume-env.sh.templateconf/flume-env.sh3.修改JAVA_HOME  flume-env.sh4.检验安装  flume-...
代码星球 代码星球·2020-04-08

hadoop +zookeeper + hbase 单节点安装

项目描述:今天花了680元买了阿里云的一台内存1G,带宽1M的云主机.想以后方便测试用,而且想把自己的博客签到自己的主机上.所以自己就搭了一个测试的环境.可以用来进行基本的hbase入库,hadoop mrjob的运行.步骤:1.配置JDK我的安装路径如下:/usr/local/java/jdk1.7.0_7...

hadoop之根据Rowkey从HBase中查询数据

 1.Hbase根据rowkey查询conf的配置信息如下:conf=newConfiguration();conf.set("hbase.zookeeper.quorum","192.168.50.253:2181");conf.set("hbase.rootdir","hdfs://192.168.50....

java实现文件单词频率统计 topN top K

思路先统计每个单词出现的个数利用TreeSet的自动&...

hadoop之 mr输出到hbase

1.注意问题:1.在开发过程中一定要导入hbase源码中的lib库否则出现如下错误TableMapReducUtil找不到什么……2.编码:importjava.io.IOException;importjava.text.ParseException;importjava.text.SimpleDateFormat;...
代码星球 代码星球·2020-04-08
首页上一页...268269270271272...下一页尾页