#阮一峰的网络日志

定时日志清理

 作用:针对的log目录是家目录的.ros文件夹,目录结构是/home/xxx/.ros/log/latest.ros中除了log文件夹,其他缓存文件全部清除然后就是log文件夹里面,这里面就是真正的log文件了,会有很多文件夹,每次重启,都会在log目录生成日志文件夹如:swswdedefraa-32323...
代码星球 ·2020-08-09

Python网络编程(Sockets)

 #!/usr/bin/python3#Thisisserver.pyfileimportsocket#createasocketobjectserversocket=socket.socket(socket.AF_INET,socket.SOCK_STREAM)#getlocalmachinenamehos...
代码星球 ·2020-08-09

shell 使用ping测试网络

 能ping通返回1,不能返回0ping-c3192.168.1.1|grep'0received'|wc-l ...

python 日志

 新建test.pyimportlogginglogger=logging.getLogger(__name__)logger.setLevel(level=logging.INFO)handler=logging.FileHandler("runtest.log")handler.setLevel(logg...
代码星球 ·2020-08-09

shell 清空指定大小的日志文件

 #!/bin/bash#当/var/log/syslog大于68B时if![-f/var/log/syslog]thenecho"filenotexist!"exit1fiif[`ls-l/var/log/syslog|awk'{print$5}'`-gt$(68)]thencat/var/log/sysl...

【Spark】通过Spark实现点击流日志分析

文章目录数据大致内容及格式统计PV(PageViews)统计UV(UniqueVisitor)求取TopN194.237.142.21--[18/Sep/2013:06:49:18+0000]"GET/wp-content/uploads/2013/07/rstudio-git3.pngHTTP/1.1"3040"-"...

Spark离线日志分析,连接Spark出现报错

首先,我的代码是这样的importorg.apache.spark.rdd.RDDimportorg.apache.spark.{SparkConf,SparkContext}objectPvCount{defmain(args:Array[String]):Unit={//获取SparkConfvalsparkCon...

【Hadoop离线基础总结】流量日志分析网站整体架构模块开发

目录数据仓库设计维度建模概述维度建模的三种模式本项目中数据仓库的设计ETL开发创建ODS层数据表导入ODS层数据生成ODS层明细宽表统计分析开发流量分析受访分析访客visit分析关键路径转化率分析(漏斗模型)级联求和流量日志分析网站整体架构模块的整体步骤为下图关于数据采集模块和数据预处理的开发在【Hadoop离线基础总...

【Hadoop离线基础总结】网站流量日志数据分析系统

目录点击流数据模型概述点击流模型网站流量分析网站流量模型分析网站流量来源网站流量多维度细分网站内容及导航分析网站转化及漏斗分析流量常见分析角度和指标分类指标概述指标分类分析角度流量日志分析网站整体架构模块步骤模块开发之数据采集模块开发之数据预处理点击流模型PageViews表点击流模型visit信息表点击流数据模型概述...

【Hadoop离线基础总结】日志采集框架Flume

Flume介绍概述Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。它可以采集文件,socket数据包、文件、文件夹、kafka等各种形式源数据,又可以将采集到的数据sink(下沉)到HDFS、hbase、hive、kafka等众多外部存储系统中,因此,flume可以适用于大部分的日常数据采集场景...

【Hadoop离线基础总结】zookeeper的介绍以及集群环境搭建、网络编程和RPC的简单了解

ZooKeeper介绍概述ZooKeeper是一个分布式协调服务的开源框架,主要用来解决分布式集群中应用系统的一致性问题。例如怎样避免同时操作同一数据造成脏读的问题。ZooKeeper本质上是一个分布式的小文件存储系统(ZooKeeper上面的每个文件内容最好不要超过1M),提供基于类似文件系统的目录树方式的数据存储,...

在IIS上搭建Exceptionless日志收集框架

  系统环境要求.NET4.6.1,如果已安装过VS请忽略。JavaSdk1.8+,Win10环境下配置Java环境变量参考,ElasticSearch5.1,它是一个基于Lunce搜索服务器。已经下载好的包:链接:https://pan.baidu.com/s/1w_00tmA2glouZvZeg4LTMQ ...

ubuntu-server14.04 网络配置

 一.启动网卡ubuntuserver安装后,ifconfig发现只有一个lo和一个p1p1 网卡,先查看服务器网卡:ifconfig-a,发现有lo,p1p1,p2p1,p3p1,p4p1要启动其他网卡,可以通过ifconfigp2p1up  #启动p2p1网卡 二.配置网卡如...
代码星球 ·2020-08-08

spring-boot配置log4j日志

springboot默认使用logback日志记录工具,修改为log4j:<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-web</arti...

log4js日志

安装log4js:npminstalllog4jsexpress中配置log4js中间件:varlog=require("./modules/utils/logUtil.js");log.use(app);logUtil工具类:/***CreatedbyAdministratoron2015/9/8.*/"usestr...
代码星球 ·2020-08-08
首页上一页...5657585960...下一页尾页