Hive最初是Facebook为了满足对海量社交网络数据的管理和机器学习的需求而产生和发展的。互联网现在进入了大数据时代，大数据是现在互联网的趋势，而hadoop就是大数据时代里的核心技术，但是hadoop的mapreduce操作专业性太强，所以facebook在这些基础...

转载：https://blog.csdn.net/shengmingqijiquan/article/details/52922009HBase是一个构建在HDFS上的分布式列存储系统；HBase是ApacheHadoop生态系统中的重要一员，主要用于海量结构化数据存储；从逻辑上讲，HBase将数据按照表、行和列进行存...

一.MapReduce的应用场景1.MapReduce特点易于编程良好的扩展性高容错性适合PB级以上海量数据的离线处理备注：*MR的最后一个特性就注定了它的应用场景的特定性，专门为处理离线批量大数据*而生。问：那MR不擅长什么啊？它不擅长的东西谁比较擅长呢？2.MapReduce的特色—不擅长的方面...

转载：https://www.jianshu.com/p/4b5d0e9d1afd一、HDFS是什么源自于Google的GFS论文发表于2003年10月HDFS是GFS克隆版HadoopDistributedFileSystem易于扩展的分布式文件系统运行在大量普通廉价机器上，提供容错机制为大量用户提供性能不错的文件...

转载：https://www.jianshu.com/p/f390bb88574dfilter在dubbo中的应用非常广泛，它可以对服务端、消费端的调用过程进行拦截，从而对dubbo进行功能上的扩展，我们所熟知的RpcContext就用到了filter。本文主要尝试从以下3个方面来简单介绍一下dubbo中的filter...

转载：https://blog.csdn.net/Daybreak1209/article/details/80591566应用一：方法入参校验由于系统多个方法入参均对外封装了统一的Dto，其中Dto中几个必传参数在每个方法中都会进行相同的校验逻辑。笔者考虑采用SpringAOP进行优化，拦截方法进行参数校验。测试ca...

转载：http://www.51testing.com/html/56/n-3721856.html先说项目开发过程中团队人员的分工协作。　　一、人员安排　　毕业至今的大部分项目都是独立完成，虽然也有和其他同事协作的时候，但自认为对团队协作的了解和认知都还有所欠缺。很清楚团队协作的重要性，但尚未有很好的机会在相对成熟的...

https://mp.weixin.qq.com/s/noD2Jv6m-somEMtjWTJh3w本文是根据ApacheFlink系列直播课程整理而成，由阿里巴巴高级开发工程师沙晟阳分享，主要面向于初次接触Flink、或者对Flink有了解但是没有实际操作过的同学。希望帮助大家更顺利地上手使用Flink，并着手相关开发...

withSpout在spark中是用来做DAG可视化的，它在代码里的用法如下（以map为例，spark2.0.0版本）defmap[U:ClassTag](f:T=>U):RDD[U]=withScope{valcleanF=sc.clean(f)newMapPartitionsRDD[U,T](this,(co...

关键词：Google出品；Dart语言；FlutterEngine引擎；响应式设计模式；原生渲染；免费并且开源一、简介Flutter是谷歌2018年发布的跨平台移动UI框架。作为谷歌的开源移动UI框架，Flutter可以快速在iOS和Android上构建高质量的原生用户界面，2019年，GoogleI/O大会宣布了fl...

上篇总结了缓存中出现频率比较高的一些问题，今天详细说说web应用中的缓存一致性问题。主要说以下三个方面数据库与缓存中数据不一致出现的情形发生不一致时的优化思路如何保证数据库与缓存的一致性先来讨论下结论由于操作缓存与操作数据库不是原子的，所以非常有可能出现执行失败的情况。假设先写数据库，再淘汰缓存：这时候如果出现写数据库...

 ...

<HostappBase="webapps"autoDeploy="true"name="localhost"unpackWARs="true">　　<ContextdocBase="BeikeBookV2"path=""reloadable="true"source="org.eclipse.jst...

发现网易云笔记没有Linux，但是为知笔记有Linux版本，且支持markdown格式sudoadd-apt-repositoryppa:wiznote-teamsudoapt-getupdatesudoapt-getinstallwiznote地址：http://www.wiz.cn/wiznote-linux.ht...

原文地址：https://www.cnblogs.com/artech/p/ioc-4-asp-net-web-api.html...