#AP

Job流程:Mapper类分析

此文紧接Job流程:决定map个数的因素,Map任务被提交到Yarn后,被ApplicationMaster启动,任务的形式是YarnChild进程,在其中会执行MapTask的run()方法。无论是MapTask还是ReduceTask都是继承的Task这个抽象类。1).Mapper类中setup()和cleanup...
代码星球 ·2020-03-30

MR案例:Map-Join

适用场景:一张表十分小【key不可重复】、一张表非常大。用法:在Job提交时,首先将小表加载到DistributedCache分布式缓存中,然后从DistributeCache中读取小表解析成key/value保存到内存中(可以放在HashMap等容器中)。然后扫描大表中的每条记录的key是否能在内存中找到相同join...
代码星球 ·2020-03-30

Job流程:决定map个数的因素

此文紧接Job流程:提交MR-Job过程。上一篇分析可以看出,MR-Job提交过程的核心代码在于JobSubmitter类的submitJobInternal()方法。本文就由此方法的这一句代码开始分析://计算并确定map的个数,以及各个输入切片Splits的相关信息intmaps=writeSplits(job,s...

MR案例:链式ChainMapper

类似于Linux管道重定向机制,前一个Map的输出直接作为下一个Map的输入,形成一个流水线。设想这样一个场景:在Map阶段,数据经过mapper01和mapper02处理;在Reduce阶段,数据经过sort和shuffle后,交给对应的reducer处理。reducer处理后并没有直接写入到Hdfs, 而...
代码星球 ·2020-03-29

ubuntu完全卸载apache2

最近刚接触ubuntu和apache,第一次配置就被apahce搞到完全崩溃,跟着网上的配置修改apache的charset和apache2.conf以后,开始出现访问http://localhost然后直接让下载的提示:"youhavechosentoopen",怎么找都没找到问题到底载哪儿,不过,还是解决了一部分问...
代码星球 ·2020-03-29

capwap学习笔记——初识capwap(五)

3.CAPWAPBindingforIEEE802.11¢CAPWAP协议本身并不包括任何指定的无线技术。它依靠绑定协议来扩展对特定无线技术的支持。¢RFC5416就是用来扩展CAPWAP对IEEE802.11网络的支持。其中定义了控制消息字段,新的控制消息,消息元素。¢注意,这个协议仅支持IEEE802.11-200...
代码星球 ·2020-03-29

capwap学习笔记——初识capwap(四)

2.5.7CAPWAP传输机制WTP和AC之间使用标准的UDP客户端/服务器模式来建立通讯。CAPWAP协议支持UDP和UDP-Lite[RFC3828]。¢在IPv4上,CAPWAP控制和数据通道使用UDP。此时CAPWAP报文中的UDP校验和必须设置为0。AC上的CAPWAP控制报文端口为UDP众所周知端口5246...
代码星球 ·2020-03-29

capwap学习笔记——初识capwap(三)

2.5.6CAPWAP状态机详解2.5.6.1StarttoIdle这个状态变迁发生在设备初始化完成。¢ WTP:开启CAPWAP状态机。    ¢ AC: 开启CAPWAP状态机。2.5.6.2IdletoDiscovery这个状态变迁发生是为了支...
代码星球 ·2020-03-29

capwap学习笔记——初识capwap(一)

2初识CAPWAP2.1CAPWAP简介        说了半天CAPWAP,连全称都还没说,汗……        CAPWAP——ControlAndProv...
代码星球 ·2020-03-29

capwap学习笔记——初识capwap(二)

2.5.1AC发现机制WTP使用AC发现机制来得知哪些AC是可用的,决定最佳的AC来建立CAPWAP连接。WTP的发现过程是可选的。如果在WTP上静态配置了AC,那么WTP并不需要完成AC的发现过程。WTP首先发送一个DiscoveryRequestmessage给受限的广播地址,或者CAPWAP的多播地址(224.0...
代码星球 ·2020-03-29

capwap学习笔记——capwap的前世今生(转)

公司要做AP和AC,从今天开始学习capwap。1capwap的前世今生1.1胖AP、瘦AP、AC传统的WLAN网络都是为企业或家庭内少量移动用户的接入而组建的。因此,只需要一个无线路由器就可以搞定了,就好像现在家用的无线路由器就是胖AP。胖AP将WLAN的物理层、用户数据加密、用户认证、QoS、网络管理、漫游技术以及...

服务器反爬虫攻略:Apache/Nginx/PHP禁止某些User Agent抓取网站(转)

服务器反爬虫攻略:Apache/Nginx/PHP禁止某些UserAgent抓取网站(转)...

AppBox_v2.0完整版免费下载,暨AppBox_v3.0正式发布!

 文章更新:AppBoxv6.0中实现子页面和父页面的复杂交互   AppBox是基于FineUI的通用权限管理框架,包括用户管理、职称管理、部门管理、角色管理、角色权限管理等模块。AppBoxv2.0 发布于2012年12月份,前端展现使用的是FineUIv3.2.3...

纯手工打造漂亮的瀑布流,五大插件一个都不少Bootstrap+jQuery+Masonry+imagesLoaded+Lightbox!

 前两天写的文章《纯手工打造漂亮的垂直时间轴,使用最简单的HTML+CSS+JQUERY完成100个版本更新记录的华丽转身!》受到很多网友的喜爱,今天特别推出姊妹篇《纯手工打造漂亮的瀑布流,五大插件一个都不少Bootstrap+jQuery+Masonry+imagesLoaded+Lightbox!》,希望...

AppBox v6.0中实现子页面和父页面的复杂交互

1.你可以通过捐赠获取AppBox的完整源代码:http://fineui.com/donate/2.AppBoxv3.0于2013-08发布,采用了EFCodeFirst开发模式和扁平化的设计理念:http://www.cnblogs.com/sanshi/p/3274122.html AppBox中实现子...
首页上一页...363364365366367...下一页尾页