#oop

Hadoop之hive 其他

1.没有恩。...
代码星球 ·2020-04-08

Hadoop之伪分布环境搭建

搭建伪分布环境上传hadoop2.7.0编译后的包并解压到/zzy目录下mkdir/zzy解压tar-zxvfhadoop.2.7.0.tar.gz-C/zzy  配置hadoop注意:hadoop2.x的配置文件$HADOOP_HOME/etc/hadoop    伪分布式需要修改5个配置文件第一个:hadoop-e...

Hadoop之 hdfs 系统

一、NameNode维护着2张表:1.文件系统的目录结构,以及元数据信息2.文件与数据块列表的对应关系存放在fsimage中,在运行的时候加载到内存中的。操作日志写到edits中 二、DataNode使用block形式存储。在hadoop2中,默认的大小是128MB。使用副本形式保存数据的安全,默认的数量是3个。 使用...
代码星球 ·2020-04-08

《Hadoop基础教程》之初识Hadoop

Hadoop一直是我想学习的技术,正巧最近项目组要做电子商城,我就开始研究Hadoop,虽然最后鉴定Hadoop不适用我们的项目,但是我会继续研究下去,技多不压身。     《Hadoop基础教程》是我读的第一本Hadoop书籍,当然在线只能试读第一章,不过对Hadoo...
代码星球 ·2020-04-08

Hadoop日记Day1---Hadoop介绍

Hadoop是一个适合大数据的分布式存储与计算平台。作者:DougCutting;Lucene,Nutch。受Google三篇论文的启发HDFS:HadoopDistributedFileSystem分布式文件系统MapReduce:并行计算框架3.1HDFS架构(1) 主从结构•主节点,只有一个:...

Hadoop集群(第1期)_CentOS安装配置

CentOS是什么?   CentOS是一个基于RedHat 企业级Linux 提供的可自由使用的源代码企业级的Linux发行版本。每个版本的 CentOS 都会获得七年的支持(通过安全更新方式)。新版本的 CentOS 每两年发行一次,而每个版本的...

Hadoop 2 与Hadoop 1的区别

 Hadoop2与Hadoop1的区别...
代码星球 ·2020-04-08

编程思想的理解(POP,OOP,SOA,AOP)

编程思想就是一种解决现实问题的一种办法,每一种语言都是对现实问题进行抽象,从而让计算机去解决。面向过程更多的是把问题抽象成步骤,一步一步去执行而不关心是谁在执行,面向对象则是把现实问题里面的概念构件都抽象成了对象,通过发送请求的方式让对象去完成任务,就比如大象装进冰箱,那么就不光是可以装大象了,还可以装别的东西,从而解...

hadoop三种安装模式的基本原理

 Hadoop的安装详情查看本博客本专栏内其它文章一、三种安装模式的运行原理:1.单机模式:Hadoop默认模式、即非分布式模式(本地模式)、无需进行其他配置即可运行非分布式,即java单进程,方便进行调试。2.伪分布式模式:Hadoop在单节点上以伪分布式的方式运行,Hadoop进程以分离的java进程来运...

Cenos7下hadoop2.7.7伪分布式模式安装

 环境介绍:Centos7+jdk1.8.0_211一、首先、安装JDK1.8.0,详情请移步Centos7下安装配置JDK关闭防火墙(建议关闭、当然也可以自己开放端口)Centos7下防火墙的操作创建一个用户hadoop,当然也可以使用root用户操作。(我的是使用root操作)可以创建一个linux用户叫...

Apache Hadoop RPC Authentication 安全绕过漏洞

漏洞名称:ApacheHadoopRPCAuthentication安全绕过漏洞CNNVD编号:CNNVD-201308-425发布时间:2013-08-28更新时间:2013-08-28危害等级:  漏洞类型:权限许可和访问控制威胁类型:远程CVE编号:CVE-2013-2192漏洞来源:Kyle...

hadoop: hive 1.2.0 在mac机上的安装与配置

环境:macOSXYosemite+hadoop2.6.0+hive1.2.0+ jdk1.7.0_79前提:hadoop必须先安装,且处于运行状态(伪分式模式或全分布模式均可)hive官网地址:http://hive.apache.org/建议:经个人实践,在macOSXYosemite环境下,如果使用ap...

mac OS X Yosemite 上编译hadoop 2.6.0/2.7.0及TEZ 0.5.2/0.7.0 注意事项

1、jdk1.7问题hadoop2.7.0必须要求jdk1.7.0,而oracle官网已经声明,jdk1.7以后不准备再提供更新了,所以趁现在还能下载,赶紧去down一个mac版吧http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads...

hadoop: hbase1.0.1.1 伪分布安装

环境:hadoop2.6.0+hbase1.0.1.1+macOSXyosemite10.10.3安装步骤:一、下载解压到官网http://hbase.apache.org下载合适的版本(hbase与hadoop的版本要匹配,否则可能运行不起来),解压到某个目录即可,本文中的解压目录为/Users/jimmy/app/...

Hadoop:pig 安装及入门示例

pig是hadoop的一个子项目,用于简化MapReduce的开发工作,可以用更人性化的脚本方式分析数据。一、安装a)下载从官网http://pig.apache.org下载最新版本(目前是0.14.0版本),最新版本可以兼容hadop0.x/1.x/2.x版本,直接解压到某个目录即可。注:下面是几个国内的镜像站点ht...
首页上一页...2829303132...下一页尾页