51
Dev开发社区
首页
文章
问答
工具
搜索
登录
注册
#oop
Hadoop之hive 其他
1.没有恩。...
代码星球
·
2020-04-08
Hadoop
hive
其他
Hadoop之伪分布环境搭建
搭建伪分布环境上传hadoop2.7.0编译后的包并解压到/zzy目录下mkdir/zzy解压tar-zxvfhadoop.2.7.0.tar.gz-C/zzy 配置hadoop注意:hadoop2.x的配置文件$HADOOP_HOME/etc/hadoop 伪分布式需要修改5个配置文件第一个:hadoop-e...
代码星球
·
2020-04-08
Hadoop
之伪
分布
环境
搭建
Hadoop之 hdfs 系统
一、NameNode维护着2张表:1.文件系统的目录结构,以及元数据信息2.文件与数据块列表的对应关系存放在fsimage中,在运行的时候加载到内存中的。操作日志写到edits中 二、DataNode使用block形式存储。在hadoop2中,默认的大小是128MB。使用副本形式保存数据的安全,默认的数量是3个。 使用...
代码星球
·
2020-04-08
Hadoop
hdfs
系统
《Hadoop基础教程》之初识Hadoop
Hadoop一直是我想学习的技术,正巧最近项目组要做电子商城,我就开始研究Hadoop,虽然最后鉴定Hadoop不适用我们的项目,但是我会继续研究下去,技多不压身。 《Hadoop基础教程》是我读的第一本Hadoop书籍,当然在线只能试读第一章,不过对Hadoo...
代码星球
·
2020-04-08
Hadoop基础教程
初识
Hadoop
Hadoop日记Day1---Hadoop介绍
Hadoop是一个适合大数据的分布式存储与计算平台。作者:DougCutting;Lucene,Nutch。受Google三篇论文的启发HDFS:HadoopDistributedFileSystem分布式文件系统MapReduce:并行计算框架3.1HDFS架构(1) 主从结构•主节点,只有一个:...
代码星球
·
2020-04-08
Hadoop
日记
Day1---Hadoop
介绍
Hadoop集群(第1期)_CentOS安装配置
CentOS是什么? CentOS是一个基于RedHat 企业级Linux 提供的可自由使用的源代码企业级的Linux发行版本。每个版本的 CentOS 都会获得七年的支持(通过安全更新方式)。新版本的 CentOS 每两年发行一次,而每个版本的...
代码星球
·
2020-04-08
Hadoop
集群
1期
CentOS
安装
Hadoop 2 与Hadoop 1的区别
Hadoop2与Hadoop1的区别...
代码星球
·
2020-04-08
Hadoop
区别
编程思想的理解(POP,OOP,SOA,AOP)
编程思想就是一种解决现实问题的一种办法,每一种语言都是对现实问题进行抽象,从而让计算机去解决。面向过程更多的是把问题抽象成步骤,一步一步去执行而不关心是谁在执行,面向对象则是把现实问题里面的概念构件都抽象成了对象,通过发送请求的方式让对象去完成任务,就比如大象装进冰箱,那么就不光是可以装大象了,还可以装别的东西,从而解...
代码星球
·
2020-04-08
编程
思想
理解
POP
OOP
hadoop三种安装模式的基本原理
Hadoop的安装详情查看本博客本专栏内其它文章一、三种安装模式的运行原理:1.单机模式:Hadoop默认模式、即非分布式模式(本地模式)、无需进行其他配置即可运行非分布式,即java单进程,方便进行调试。2.伪分布式模式:Hadoop在单节点上以伪分布式的方式运行,Hadoop进程以分离的java进程来运...
代码星球
·
2020-04-07
hadoop
三种
安装
模式
基本
Cenos7下hadoop2.7.7伪分布式模式安装
环境介绍:Centos7+jdk1.8.0_211一、首先、安装JDK1.8.0,详情请移步Centos7下安装配置JDK关闭防火墙(建议关闭、当然也可以自己开放端口)Centos7下防火墙的操作创建一个用户hadoop,当然也可以使用root用户操作。(我的是使用root操作)可以创建一个linux用户叫...
代码星球
·
2020-04-07
Cenos7
hadoop2.7.7
分布式
模式
安装
Apache Hadoop RPC Authentication 安全绕过漏洞
漏洞名称:ApacheHadoopRPCAuthentication安全绕过漏洞CNNVD编号:CNNVD-201308-425发布时间:2013-08-28更新时间:2013-08-28危害等级: 漏洞类型:权限许可和访问控制威胁类型:远程CVE编号:CVE-2013-2192漏洞来源:Kyle...
代码星球
·
2020-04-07
Apache
Hadoop
RPC
Authentication
安全
hadoop: hive 1.2.0 在mac机上的安装与配置
环境:macOSXYosemite+hadoop2.6.0+hive1.2.0+ jdk1.7.0_79前提:hadoop必须先安装,且处于运行状态(伪分式模式或全分布模式均可)hive官网地址:http://hive.apache.org/建议:经个人实践,在macOSXYosemite环境下,如果使用ap...
代码星球
·
2020-04-06
hadoop
hive
1.2.0
mac
机上
mac OS X Yosemite 上编译hadoop 2.6.0/2.7.0及TEZ 0.5.2/0.7.0 注意事项
1、jdk1.7问题hadoop2.7.0必须要求jdk1.7.0,而oracle官网已经声明,jdk1.7以后不准备再提供更新了,所以趁现在还能下载,赶紧去down一个mac版吧http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads...
代码星球
·
2020-04-06
mac
OS
Yosemite
编译
hadoop
hadoop: hbase1.0.1.1 伪分布安装
环境:hadoop2.6.0+hbase1.0.1.1+macOSXyosemite10.10.3安装步骤:一、下载解压到官网http://hbase.apache.org下载合适的版本(hbase与hadoop的版本要匹配,否则可能运行不起来),解压到某个目录即可,本文中的解压目录为/Users/jimmy/app/...
代码星球
·
2020-04-06
hadoop
hbase1.0.1.1
分布
安装
Hadoop:pig 安装及入门示例
pig是hadoop的一个子项目,用于简化MapReduce的开发工作,可以用更人性化的脚本方式分析数据。一、安装a)下载从官网http://pig.apache.org下载最新版本(目前是0.14.0版本),最新版本可以兼容hadop0.x/1.x/2.x版本,直接解压到某个目录即可。注:下面是几个国内的镜像站点ht...
代码星球
·
2020-04-06
Hadoop
pig
安装
入门
示例
首页
上一页
...
28
29
30
31
32
...
下一页
尾页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他