#方分布

mysql分布式集群实现原理

 做MySQL集群,例如:利用mysql cluster,mysqlproxy,mysqlreplication,drdb等等有人会问mysql集群,根分表有什么关系吗?虽然它不是实际意义上的分表,但是它启到了分表的作用,做集群的意义是什么呢?为一个数据库减轻负担,说白了就是减少sql排队队列中的s...

基于spring+quartz的分布式定时任务框架

http://www.cnblogs.com/aaronfeng/p/5537177.html问题背景   我公司是一个快速发展的创业公司,目前有200人,主要业务是旅游和酒店相关的,应用迭代更新周期比较快,因此,开发人员花费了更多的时间去更=跟上迭代的步伐,而缺乏了对整个系统的把控 没有集群之前,...

分布式、集群、微服务

微服务是架构设计方式分布式是系统部署工作方式集群是个物理形态 微服务是啥?这里不引用书本上的复杂概论了,简单来说微服务就是很小的服务,小到一个服务只对应一个单一的功能,只做一件事。这个服务可以单独部署运行,服务之间可以通过RPC来相互交互,每个微服务都是由独立的小团队开发,测试,部署,上线,负责它的整个生命周...
代码星球 ·2020-04-10

hadoop全分布式的搭建

 修改主机名:vim/etc/sysconfig/network 1修改hadoop-env.sh  2修改core-site.xml  /hadoop/tmpdir:产生namenode中fsimasage和edits文件合并元数据3修改hdfs-site....
代码星球 ·2020-04-08

hadoop伪分布式环境搭建

1.关防火墙2.设置IP地址3.设置network文件hosts映射文件4.安装jdk5.安装hadoop6.配置hadoop:hadoop-env.sh、core-site.xml、hdfs-site.xml、Mapred-site.xml、yarn-site.xml 1.1重启网卡(命名行重启)1.2机器...

集群和分布式

集群是个物理形态,分布式是个工作方式。 只要是一堆机器,就可以叫集群,他们是不是一起协作着干活,这个谁也不知道;一个程序或系统,只要运行在不同的机器上,就可以叫分布式,嗯,C/S架构也可以叫分布式。 集群一般是物理集中、统一管理的,而分布式系统则不强调这一点。 所以,集群可能运行着一个或多...
代码星球 ·2020-04-08

长尾分布(幂律分布)

1. 2. ...
代码星球 ·2020-04-08

Hadoop之伪分布环境搭建

搭建伪分布环境上传hadoop2.7.0编译后的包并解压到/zzy目录下mkdir/zzy解压tar-zxvfhadoop.2.7.0.tar.gz-C/zzy  配置hadoop注意:hadoop2.x的配置文件$HADOOP_HOME/etc/hadoop    伪分布式需要修改5个配置文件第一个:hadoop-e...

什么是分布式系统中的幂等性

最近很多人都在谈论幂等性,好吧,这回我也来聊聊这个话题,光看着俩字,一开始的确有点一头雾水,语文不好嘛,词太专业嘛,对吧 现如今我们的系统大多拆分为分布式SOA,或者微服务,一套系统中包含了多个子系统服务,而一个子系统服务往往会去调用另一个服务,而服务调用服务无非就是使用RPC通信或者restful,既然是通...

python基于redis实现分布式锁

我们在开发应用的时候,如果需要对某一个共享变量进行多线程同步访问的时候,可以使用我们学到的锁进行处理,并且可以完美的运行,毫无Bug!注意这是单机应用,后来业务发展,需要做集群,一个应用需要部署到几台机器上然后做负载均衡,大致如下图:  上图可以看到,变量A存在三个服务器内存中(这个变量A主要体现是...

分布式的两种算法

这种算法非常的简单,就是根据服务器台数的余数进行分散,求得整数值的hash值,再除以服务器的台数,根据其余数来选择服务器,将server的hash值与server的总台数进行求余,即hash%N。但是在这种算法对缓存命中率的影响下:我们假设有8台服务器,运行中突然down了一台,则求余的底数变成了7,那么其产生的结果就...
代码星球 ·2020-04-07

Cenos7下hadoop2.7.7伪分布式模式安装

 环境介绍:Centos7+jdk1.8.0_211一、首先、安装JDK1.8.0,详情请移步Centos7下安装配置JDK关闭防火墙(建议关闭、当然也可以自己开放端口)Centos7下防火墙的操作创建一个用户hadoop,当然也可以使用root用户操作。(我的是使用root操作)可以创建一个linux用户叫...

ganglia分布式监控部署

一.介绍        Ganglia是由UCBerkeley发起的一个开源监控项目,设计用于监控数以千几的节点。每台服务器都运行一个收集和发送监控数据名为gmond的守护进程。它将从操作系统和指定主机中收集。接收所有监控数据的主机可以显示...

分布式RPC框架性能大比拼

  https://github.com/grpc/grpchttp://colobu.com/2016/09/05/benchmarks-of-popular-rpc-frameworks/https://www.zhihu.com/question/30027669...

hadoop: hbase1.0.1.1 伪分布安装

环境:hadoop2.6.0+hbase1.0.1.1+macOSXyosemite10.10.3安装步骤:一、下载解压到官网http://hbase.apache.org下载合适的版本(hbase与hadoop的版本要匹配,否则可能运行不起来),解压到某个目录即可,本文中的解压目录为/Users/jimmy/app/...
首页上一页...2930313233...下一页尾页