公司网站的访问量有多大，访问高峰期的时间段是多少，最经常访问的热点数据是什么？这一切的一切，虽然我们可以自己通过shell等手段截取出来，但是如果网站多了，服务器多了，还是非常不方便，而且阅读性也不好，因此ELK应运而生，不仅可以获取访问高峰期，还可以制作图表，让你的领导一目了然，ELK已然成为各大互联往公司必部署的项...

?日志主要包括系统日志和应用程序日志，运维和开发人员可以通过日志了解服务器中软硬件的信息，检查应用程序或系统的故障，了解故障出现的原因，以便解决问题。分析日志可以更清楚的了解服务器的状态和系统安全状况，从而可以维护服务器稳定运行。?但是日志通常都是存储在各自的服务器中。如果管理数十台服务器，查阅日志需要依次登陆不同的服...

『数据收集』，作为一项工作，存在感高的忽视不了——不管你在企业里是什么角色（大部分），Ta似乎都在你的工作范围内。 你是人事：收集招聘数据、员工信息；你是采购：收集供应商信息、商品数据；你是市场：收集市场调研、活动报名数据；...... 你是老板：着看着员工用五花八门的表单工具，汇总成一张张字段永远...

阅读目录：1.环境准备2.安装Logstash3.配置Logstash4.Logstash采集的日志数据，在Kibana中显示5.安装配置Filebeat6.Filebeat采集的日志数据，在Kibana中显示7.Filebeat采集日志数据，Logstash过滤8.Filebeat采集的日志数据，Logstash过滤...

对于btt的结果分析十分的困难，我和同事花了很多的时间在网上查找btt输出的每一项参数的意义，试图更好的分析bio的统计信息，但网上文章一大抄，翻来覆去就是那几篇文章。本文中内容参考了以下网址：1.btt官方网址：http://git.kernel.dk/cgit/blktrace/tree/btt/doc/btt.t...

http://bean-li.github.io/blktrace-to-report/上篇博客介绍了iostat的一些输出，这篇介绍blktrace这个神器。上一节介绍iostat的时候，我们心心念念希望得到块设备处理io的servicetime，而不是servicetime+waittime，因为对于评估一个磁盘或...

本文链接地址: IO模式调查利器blkiomon介绍blkiomon是blktrace工具包带的一个方便用户了解IO情况的工具,由于blktrace太专业,需要了解的IO协议栈的东西太多,blkiomon给大多数的用户提供了一种易于使用的方式.blktrace的使用参考这里:http://blog.yufen...

本文链接地址: blktrace未公开选项网络保存截取数据我们透过blktrace来观察io行为的时候，第一件事情需要选择目标设备，以便分析该设备的io行为。具体使用可以参考我之前写的几篇：这里 这里 这里blktrace分为内核部分和应用部分，应用部分收到我们要捕捉的设备名单，传给内核。...

http://blog.yufeng.info/archives/751 我们在Linux上总是要保存数据的，数据要么保存在文件系统里(如ext3)，要么就在裸设备里面。我们在使用这些数据的时候都是通过文件这个抽象来访问的，操作系统会把我们需要的数据给我们，我们通常无需和块设备打交道。从下图我们可以很清楚的看...

前面写过maptalksplugin(ArcGISTileLayer)，有读者留言说文章写得太精简，根据文章给出的核心代码没办法写出一个完整的plugin(文中有完整demo地址，可能太隐蔽)，这篇文章具体地说下plugin如何编写，并实现一个plugin(WMTSTileLayer)。 学习一个新东西，最好...

最近需要加载ArcGIS瓦片图层，运行官网加载ArcGIS瓦片图层的demo是没有问题的。如果把ArcGIS瓦片图层URL换成是自已发布的ArcGIS地图服务，发现加载不出来，而服务本身提供的ArcGISAPI却可以加载出来。到底是哪里的问题呢，于是便试着写了个自定义扩展方法ArcGISTileLayer用来加载Arc...

Maptalks项目是一个HTML5的地图引擎,基于原生ES6Javascript开发：-二三维一体化地图,通过二维地图的旋转/倾斜增加三维视角-插件化设计,能与其他图形库结合,开发各种二三维效果,例如echarts/d3/THREE等-很认真的优化了绘制性能-很重视测试,有接近1.5K个单元测试用例,所以稳定性还不错...

array_map(): 1、array_map()函数将用户自定义函数作用到数组中的每个值上，并返回用户自定义函数作用后的带有新值的数组,若函数作用后无返回值，则对应的新值数组中为空。 2、回调函数接受的参数数目应该和传递给array_map()函数的数组数目一致。 3、提示：您可以向函...

本文将介绍如何在Spark上使用Scala编写快速导入数据到Hbase中的方法。这里将介绍两种方式：第一种使用Put普通的方法来倒数；第二种使用BulkLoadAPI。  使用 org.apache.hadoop.hbase.client.Put 将数据一条一条写入Hbase中，...

通常当系统发生故障时，工程师需要登录到各个服务器上，使用grep/sed/awk等Linux脚本工具去日志里查找故障原因。在没有日志系统的情况下，首先需要定位处理请求的服务器，如果这台服务器部署了多个实例，则需要去每个应用实例的日志目录下去找日志文件。每个应用实例还会设置日志滚动策略（如：每天生成一个文件），还有日志压...