#架构整洁之道

【Hadoop入门学习系列之六】HBase基本架构、编程模型和应用案例

转载:https://blog.csdn.net/shengmingqijiquan/article/details/52922009HBase是一个构建在HDFS上的分布式列存储系统;HBase是ApacheHadoop生态系统中的重要一员,主要用于海量结构化数据存储;从逻辑上讲,HBase将数据按照表、行和列进行存...

【Hadoop入门学习系列之四】MapReduce 2.0应用场景和原理、基本架构和编程模型

一.MapReduce的应用场景1.MapReduce特点易于编程良好的扩展性高容错性适合PB级以上海量数据的离线处理备注:*MR的最后一个特性就注定了它的应用场景的特定性,专门为处理离线批量大数据*而生。问:那MR不擅长什么啊?它不擅长的东西谁比较擅长呢?2.MapReduce的特色—不擅长的方面...

HDFS应用场景、原理、基本架构

转载:https://www.jianshu.com/p/4b5d0e9d1afd一、HDFS是什么源自于Google的GFS论文发表于2003年10月HDFS是GFS克隆版HadoopDistributedFileSystem易于扩展的分布式文件系统运行在大量普通廉价机器上,提供容错机制为大量用户提供性能不错的文件...

高德全链路压测平台TestPG的架构与实践

https://blog.csdn.net/amap_tech/article/details/999212661.导读2018年十一当天,高德DAU突破一个亿,不断增长的日活带来喜悦的同时,也给支撑高德业务的技术人带来了挑战。如何保障系统的稳定性,如何保证系统能持续的为用户提供可靠的服务?是所有高德技术人面临的问题,...

服务端高并发分布式架构演进之路

本文以淘宝作为例子,介绍从一百个并发到千万级并发情况下服务端的架构的演进过程,同时列举出每个演进阶段会遇到的相关技术,让大家对架构的演进有一个整体的认知,文章最后汇总了一些架构设计的原则。在介绍架构之前,为了避免部分读者对架构设计中的一些概念不了解,下面对几个最基础的概念进行介绍:分布式系统中的多个模块在不同服务器上部...

美团外卖系统架构演进与稳定性的探索

“相信大部分人都用过美团外卖,尤其是在每天的两个吃饭的高峰期。美团外卖从创业到现在经历了数次的迭代,不断的适应需求,提供更好的体验。本文是美团外卖架构师曹振团在ArchSummit2016深圳站上的分享。老司机简介曹振团,美团外卖技术专家/架构师,目前负责美团外卖业务系统的架构设计及优化工作。2013年加入...

架构稳定性

本文链接:https://blog.csdn.net/arkzheng/article/details/52090254架构稳定性需要注意些什么?如果你有好的观点也可以抛出来,欢迎批评指导1.压测知道你的容量,设置报警线;读通过tcpcopy,写通过染色数据,如此引入线上数据回放测试2.如果出现事故如何引导用户3.拆分...
代码星球 ·2020-04-05

分布式架构的架构稳定性

本文链接:https://blog.csdn.net/m0_38125278/article/details/95046242分布式架构的架构稳定性接上一期架构性能,本期讲架构稳定性 1.服务拆分服务拆分主要有两个目的:一是为了隔离故障,二是为了重用服务模块。但服务拆分完之后,会引入服务调用间的依赖问题。2....
代码星球 ·2020-04-05

测试架构师

http://www.51testing.com/?uid-293557-action-spacelist-type-blog-itemtypeid-12625...
代码星球 ·2020-04-05

知乎实时数仓实践及架构演进

https://blog.csdn.net/rlnLo2pNEfx9c/article/details/90191204...

Druid.io系列(七):架构剖析

Druid的目标是提供一个能够在大数据集上做实时数据摄入与查询的平台,然而对于大多数系统而言,提供数据的快速摄入与提供快速查询是难以同时实现的两个指标。例如对于普通的RDBMS,如果想要获取更快的查询速度,就会因为创建索引而牺牲掉写入的速度,如果想要更快的写入速度,则索引的创建就会受到限制。而Druid却可以完美的对两...
代码星球 ·2020-04-05

Druid.io系列(二):基本概念与架构

原文链接: https://blog.csdn.net/njpjsoftdev/article/details/52955788 在介绍Druid架构之前,我们先结合有关OLAP的基本原理来理解Druid中的一些基本概念。 以图3.1为例,结合我们在第一章中介绍的OLAP基本概念,按列的类...

lambda架构简介

Lambda架构是由Storm的作者NathanMarz提出的一个实时大数据处理框架。Marz在Twitter工作期间开发了著名的实时大数据处理框架Storm,Lambda架构是其根据多年进行分布式大数据系统的经验总结提炼而成。Lambda架构的目标是设计出一个能满足实时大数据系统关键特性的架构,包括有:高容错、低延时...
代码星球 ·2020-04-05

kudu架构(转)

   Highavailability(高可用性)。Tabletserver和Master使用RaftConsensusAlgorithm来保证节点的高可用,确保只要有一半以上的副本可用,该tablet便可用于读写。例如,如果3个副本中有2个或5个副本中的3个可用,则该tablet可用。即...
代码星球 ·2020-04-05
首页上一页...4344454647...下一页尾页