51
Dev开发社区
首页
文章
问答
工具
搜索
登录
注册
#分布式存储
Hadoop2 伪分布式部署
一.简单介绍二.安装部署三.执行hadoop样例并測试部署环境四.注意的地方一.简单介绍 Hadoop是一个由Apache基金会所开发的分布式系统基础架构,Hadoop的框架最核心的设计就是:HDFS和MapReduce。HDFS为海量的数据提供了存储。HDFS有高容错性的特点,并且设...
代码星球
·
2020-04-06
Hadoop2
分布式
部署
为全球数据中心提供创新存储方案
-PMC公司副总裁兼存储事业部总经理TravisKarr于CCCC演讲实录- 本次演讲涉及几个方面的内容。首先是中国数据中心存储增长的源动力,另外就是全球其它地区的数据中心看到的共同发展趋势。根据这些趋势,进一步针对具体案例做出具体分析与...
代码星球
·
2020-04-06
全球
数据中心
提供
创新
存储
GlusterFS分布式文件系统高速管理
TaoCloudXDFS基于GlusterFS开源分布式文件系统,进行了系统优化、project化、定制化和产品化工作,五年以上的实践积累了大量实践经验,包含客户案例、最佳实践、定制开发、咨询服务和技术培训。XDFS推崇KISS大道至简的哲学,从架构到使用、管理都非常简便。XDFS提供了WebGUI管理系统。这里不作介...
代码星球
·
2020-04-06
GlusterFS
分布式
文件
系统
高速
HBase数据存储格式
好的数据结构。对于检索数据,插入数据的效率就会非常高。常见的数据结构B+树根节点和枝节点非常easy,分别记录每一个叶子节点的最小值,并用一个指针指向叶子节点。叶子节点里每一个键值都指向真正的数据块,每一个叶子节点都有前指针和后指针。这是为了做范围查询时,叶子节点间能够直接跳转,从而避免再去回溯至枝和根节点。特点:1、...
代码星球
·
2020-04-06
HBase
数据
存储
格式
开源的轻量级JSON存储Kinto介绍
本文来源于我在InfoQ中文站翻译的文章,原文地址是:http://www.infoq.com/cn/news/2015/12/introducing-kintoKinto是个提供了同步与分片功能的轻量级JSON存储服务,并且易于使用。它在Mozilla内部得到了广泛的应用,基于Apachev2许可。基本上,Kinto...
代码星球
·
2020-04-06
开源
轻量级
JSON
存储
Kinto
云存储市场布局已定,怎样助力企业互联网转型
够快助力企业互联网转型 近日,够快云库COO徐葛在集聚了70多位企业大佬的追梦咖啡厅内,为大家带来了主题为《传统企业的互联网转型之路》的精彩演讲。他从传统企业的角度出发。提出了互联网本质是什么。什么样的企业能够算是“互联网”的企业。够快云库如何助力企业互联网转型. 互联网的本质是什么 企业互联网化,不应该只停...
代码星球
·
2020-04-06
存储
市场
布局
已定
怎样
架构设计:系统存储(24)——数据一致性与Paxos算法(中)
(接上文《架构设计:系统存储(23)——数据一致性与Paxos算法(上)》)2-1-1.Prapare准备阶段首先须要介绍几个在Acceptor角色上须要被持久化保存的数据属性:PrepareVote保存了当前Acceptor接收到的已完毕投票授权的最大投票轮次AcceptedVote保存了当前Acceptor在赋值阶...
代码星球
·
2020-04-06
架构
设计
系统
存储
数据
分布式多爬虫系统——架构设计
在爬虫的开发过程中,有些业务场景须要同一时候抓取几百个甚至上千个站点,此时就须要一个支持多爬虫的框架。在设计时应该要注意下面几点:代码复用。功能模块化。假设针对每一个站点都写一个完整的爬虫。那当中必然包括了很多反复的工作。不仅开发效率不高。并且到后期整个爬虫项目会变得臃肿、难以管理。易扩展。多爬虫框架,这最直观的需求就...
代码星球
·
2020-04-06
分布式
爬虫
系统
架构
设计
【Java】分布式RPC通信框架Apache Thrift 使用总结
ApacheThrift是Facebook开源的跨语言的RPC通信框架,目前已经捐献给Apache基金会管理,由于其跨语言特性和出色的性能,在很多互联网公司得到应用,有能力的公司甚至会基于thrift研发一套分布式服务框架,增加诸如服务注册、服务发现等功能。 RPC即RemoteProcedureCall,翻译为...
代码星球
·
2020-04-06
Java
分布式
RPC
通信
框架
分布式架构 Hadoop 2.7.X 安装和配置
一、安装环境 硬件:虚拟机 操作系统:Ubuntu1432位 IP:59.77.132.28主机名:admin安装用户:root二、安装JDK 安装JDK1.7或者以上版本。这里安装jdk1.7.0_79。 下载地址:http://www.oracle.com/tech...
代码星球
·
2020-04-05
分布式
架构
Hadoop
2.7.X
安装
linux文件远程传输客户端shell脚本与分布式客户机时间同步脚本
#!/bin/bash#将代码和脚本传送至worker节点#改变当前工作目录cd${AMAZONCRAWLER_HOME}#读取worker节点ip列表i=0whilereadline1do#去除空格line1=`echo$line1|seds/[[:space:]]//g`#若为空则忽略本行if["$line1"x=...
代码星球
·
2020-04-05
脚本
linux
文件
远程
传输
2016全国研究生数学建模A题多无人机协同任务规划——基于分布式协同多旅行商MTSP遗传算法
1、MTSP问题描述 有Ⅳ个城市,要求旅行商到达每个城市各一次,且仅一次,并且要求旅行路线最短。而多旅行商问题M个旅行商从同一个城市(或多个城市)出发。分别走一条旅路线,且总路程最短。2、MTSP问题价值 有关MTSP的研究在现实中有很大的使用价值。诸如:交通运输、铁道铺设、路线的选择、计算机网络的拓扑设计、邮递员...
代码星球
·
2020-04-05
协同
2016
全国
研究生
数学建模
Phpwind v9.0 存储型xss跨站漏洞
漏洞版本:Phpwindv9.0漏洞描述:Phpwind专注于中小网站应用的整合和价值的发掘,我们认为,以社区为网站的基础,可以提供丰富的应用,满足人们获取信息、交流、娱乐、消费等生活需求、获得归属感,成为人们的网上家园。发帖回帖,上传图片处,绕过客户端限制。也可以通过高级,的代码模式进行编辑,插入XSS代码<*...
代码星球
·
2020-04-05
Phpwind
v9.0
存储型
xss
跨站
存储引擎(Mysql)
最常使用的2种存储引擎:1.Myisam是Mysql的默认存储引擎,当create创建新表时,未指定新表的存储引擎时,默认使用Myisam。每个MyISAM在磁盘上存储成三个文件。文件名都和表名相同, 扩展名分别是.frm(存储表定义)、.MYD(MYData,存储数据)、.MYI(MYIndex,存储索引)。数据文...
代码星球
·
2020-04-05
存储
引擎
Mysql
已知一个数组,将所有元素乘二存储到原数组
/****/packageStudent_System;importjava.util.*;/**Homework11**ArrayDemo05*已知一个数组,将所有元素乘二存储到原数组*@author读你一世**QQ:1816274408*2017年4月13日下午10:05:22**/publicclassArray...
代码星球
·
2020-04-05
数组
已知
一个
所有
元素
首页
上一页
...
66
67
68
69
70
...
下一页
尾页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他