hive三种调用方式
一、hive-e‘sql语句’（shell命令）适合比较短的sql语句调用，优点是可以直接在shell中调用静音模式-S在执行HiveQL过程中，不在显示器输出MR的执行过程hive-S-e‘sql语句’>test.txt将执行结果直接输入到本地文件二、hive-fsql.sql（shell命令）适合比较长的sq...
Hive的三种Join方式
1.Common/Shuffle/ReduceJoinReduceJoin在Hive中也叫CommonJoin或ShuffleJoin如果两边数据量都很大，它会进行把相同key的value合在一起，正好符合我们在sql中的join，然后再去组合，如图所示。2.MapJoin1）大小表连接： 如果一张表的数据很大，另外...
hive优化方式总结
1. 多表join优化代码结构： select..fromJOINTABLES(A,B,C)WITHKEYS(A.key,B.key,C.key)where....关联条件相同多表join会优化成一个job2. LeftSemi-Join是可以高效实现IN/EXIS...
分布式锁原理及实现方式
本文转自：http://www.hollischuang.com/archives/1716 目前几乎很多大型网站及应用都是分布式部署的，分布式场景中的数据一致性问题一直是一个比较重要的话题。分布式的CAP理论告诉...
在Windows服务器中启动PowerShell方式总结
PowerShell从名字可以知道，他首先是一个shell，而Power就意味他是一个功能强大的shell，从面向用户而言，个人觉得其功能强大体现在以下几方面：（1）微软态度。微软是真正的在推行PowerShell，包括Office等更多自家软件，底层都是调用PowerShell来实现。（2）兼容性cmd。PowerS...