一、FastDFS简介一、FastDFS简介/FastDFS是由国人余庆所开发，其项目地址：https://github.com/happyfish100  FastDFS是一个轻量级的开源分布式文件系统，主要解决了大容量的文件存储和高并发访问的问题，文件存取时实现了负载均衡。 ...

原创 2017-11-21 帝都羊 架构师小秘圈一，题记所有的业务系统，都有生成ID的需求，如订单id，商品id，文章ID等。这个ID会是数据库中的唯一主键，在它上面会建立聚集索引！ID生成的核心需求有两点：全局唯一趋势有序 二，为什么要全局唯一？ 著名的例子就是身份证...

分布式系统中，有一些需要使用全局唯一ID的场景，这种时候为了防止ID冲突可以使用36位的UUID，但是UUID有一些缺点，首先他相对比较长，另外UUID一般是无序的。有些时候我们希望能使用一种简单一些的ID，并且希望ID能够按照时间有序生成。而twitter的snowflake解决了这种需求，最初Twitter把存储系...

1.安装JDK    ElasticSearch是用JAVA语言开发的，其运行需要安装JDK。    JDK(JavaDevelopmentKit)，是整个Java的核心，包括了Java运行环境（JavaRuntimeEnvirnment）...

在 关于分布式事务的理解一文中，最后留了一个坑是关于TCC框架的。当时由于时间问题耽搁了，最近总算有时间把这个坑填上了。本文会大致介绍下两阶段和三阶段提交，以及TCC模式。 分布式事务分为两阶段型补偿型异步确保型最大努力通知型几种上文我们已近介绍了异步确保型和最大努力通知这两种服务模式的具体应用，接...

　　其实分布式事物也是个老大难的问题了，从提出到现在一直都没有个特别优雅有效的解决方案，上周遇到个分布式的问题，我想了很久，也查了很多资料。找了几种方案，但都没有达到自己的预期，现在先记录下此时对分布式事务的理解。 1.为什么会需要分布式事务？　　我们可以考虑下以下的场景，假设现在有一个电商平台，包含的功能有...

分布式环境下，数据一致性问题一直是一个比较重要的话题，而又不同于单进程的情况。分布式与单机情况下最大的不同在于其不是多线程而是多进程。多线程由于可以共享堆内存，因此可以简单的采取内存作为标记存储位置。而进程之间甚至可能都不在同一台物理机上，因此需要将标记存储在一个所有进程都能看到的地方。常见的分布式锁有三种1.数据库乐...

 前言　　日常不同应用的配置管理及更新很频繁，如果做成集中式的分布式配置中心，还支持实时更新客户端配置的话会轻松很多。常用的分布式配置中心框架：Disconf（依赖于zookpeer)Zookpeer(保证配置文件信息实时更新-事件通知)diamond（阿里巴巴研发）Apollo阿波罗（携程研发）Redisx...

原文链接：如何优雅地用Redis实现分布式锁什么是分布式锁在学习Java多线程编程的时候，锁是一个很重要也很基础的概念，锁可以看成是多线程情况下访问共享资源的一种线程同步机制。这是对于单进程应用而言的，即所有线程都在同一个JVM进程里的时候，使用Java语言提供的锁机制可以起到对共享资源进行同步的作用。如果分布式环境下...

一、什么是分布式测试　　分布式测试是指通过局域网和Internet，把分布于不同地点、独立完成特定功能的测试计算机连接起来，以达到测试资源共享、分散操作、集中管理、协同工作、负载均衡、测试过程监控等目的的计算机网络测试二、为什么分布式执行？　　在工作中使用jmeter高并发压力测试的场景下，单机受限内存、CPU、网络I...

 1、下载镜像dockerpullselenium/hubdockerpullselenium/node-firefoxdockerpullselenium/node-chrome注意：selenium/node-firefox和selenium/node-chrome都是无界面的。要想能看到实时运行界面，需...

出处：分享大厂分布式唯一ID设计方案 一、前言二、分布式ID的几种生成方案2.1、UUID2.2、MySQL主键自增2.3、MySQL多实例主键自增2.4、雪花snowflake算法2.5、Redis生成方案2.6、小结三、一线大厂是如何设计的呢?3.1、改造数据库主键自增3.2、竞争问题3.3、突发阻塞问题...

这里我们解释一些通用的术语，比如集群(cluster)、节点(node)和分片(shard)。Elasticsearch的扩展机制，以及它怎样处理硬件故障。在此将探索怎样创建你的集群(cluster)、节点(node)和分片(shards)，使其依照你的需求进行扩展。并保证在硬件故障时数据依然安全。一个节点(node)...

Hbase分布式具体安装步骤 Hadoop全然分布式环境已经搭建完毕（參见01_Hadoop全然分布式环境搭建）。 注意：Hbase和Hadoop的版本号必须相应！不然会出现各种问题！这里选用的是Hadoop-0.20.2和Hbase-0.90.5!经測试成功。 四、安装配置HbaseHa...

分布式锁的概念，大家应该都已经理解，在此不会细讲。分布式锁简单来说就是服务器集群环境下出现用户高并发访问同一个资源时，对该资源访问进行加锁等待，以保证资源的准确性。zookeeper的分布式锁是并发的多线程通过循环的请求创建zk节点来竞争锁的占有权，待取得占有权后，其他线程进入等待。待释放占有权后，其他线程再进行循环竞...