51
Dev开发社区
首页
文章
问答
工具
搜索
登录
注册
#阮一峰的网络日志
《海量日志数据分析与应用》之数据采集
摘要: 本文主要介绍了各种数据采集的方法,并重点对日志数据的上传进行了讲解。文章中提到的链接如下:1、更多数据集成方案,详见:https://data.aliyun.com/solution/cdp2、DataX开源项目地址:https://github.com/alibaba/DataX3、DataX工具包...
IT猿
·
2020-03-27
海量日志数据分析与应用
数据采集
【转】[Network] 计算机网络基础知识总结
阅读目录 1.网络层次划分2.OSI七层网络模型3.IP地址4.子网掩码及网络划分5.ARP/RARP协议6.路由选择协议7.TCP/IP协议8.UDP协议 9.DNS协议10.NAT协议11.DHCP协议12.HTTP协议13.一个举例 计算机网络学习的核心内容就是网络协议的学习。网络协议是为...
IT猿
·
2020-03-27
Network
计算机网络
基础知识
总结
R语言rvest包网络爬虫
钱亦欣 发表于今年06-0414:50 5228阅读 作者 SAURAVKAUSHIK译者钱亦欣网上的数据和信息无穷无尽,如今人人都用百度谷歌来作为获取知识,了解新鲜事物的首要信息源。所有的这些网上的信息都是直接可得的,而为了满足日益增长的数据需求,我坚信...
IT猿
·
2020-03-27
语言
rvest
包网络
网络
爬虫
Webharvest网络爬虫应用总结,web-harvest 编写脚本 读取 百度 博客 实例
Webharvest网络爬虫应用总结Web-Harvest是一个Java开源Web数据抽取工具。它能够收集指定的Web页面并从这些页面中提取有用的数据。其实现原理是,根据预先定义的配置文件用httpclient获取页面的全部内容(关于httpclient的内容,本博有些文章已介绍),然后运用XPath、XQ...
IT猿
·
2020-03-27
Webharvest
网络
爬虫
应用
总结
mysql错误日志/var/log/mariadb/mariadb.log,二进制日志
IT_luo关注0人评论65人阅读2018-10-1508:59:03 mariadb日志mariadb日志:1、查询日志:querylog;2、慢查询日志:slowquerylog3、错误日志:errorlog4、二进制日志:binarylog5、中继日志:releylog6、事务日志:tran...
IT猿
·
2020-03-27
日志
mysql
错误
var
log
Python已成为网络攻击的首选编程语言
Python已成为网络攻击的首选编程语言最新的调查数据表明,Python已经变成了世界上最热门的编程语言了,而Python的热门风也刮到了信息安全领域中。Python,摇身一变,也变成了黑客开发网络攻击工具时的首选。根据Imperva的监控数据显示,在今年6月底至9月中旬的所有针对网站的攻击事件中,有77%的网络攻击活...
IT猿
·
2020-03-27
Python
成为
网络
攻击
首选
JSP Debug日志
2006年末一篇blog,那时候好生涩啊: 先谈两个关于reponse.sendRedirect()函数的问题: 1、在Servlet的处理流或JSP的页面流中,sendRedirect()的出现并不意味着跳出处理流,或言之:处理流的中断,也就是说,即便页面跳转了,但后续处理...
IT猿
·
2020-03-27
JSP
Debug
日志
Facebook提出DensePose数据集和网络架构:可实现实时的人体姿态估计
https://baijiahao.baidu.com/s?id=1591987712899539583选自arXiv作者:RzaAlpGüler,NataliaNeverova,IasonasKokkinos机器之心编译参与:Panda 实现从2D图像到3D表面的对应在很多方面都有极具价值的应用前...
IT猿
·
2020-03-27
Facebook
提出
DensePose
数据
网络
网络数据包分析工具列表
此列表内容主要来自于某书的附录部分。 1、WireShark,这方面神器级工具,不赘述,自己好好学吧。 2、tcpdump和windump,完全基于文本的数据包捕获和分析 3、Cai...
IT猿
·
2020-03-27
网络
数据
包分析
分析
工具
无线网络渗透之旅
http://www.myhack58.com/Article/html/3/8/2010/26313.htm[0x00]-简介[0x01]-无线网络安全 [0x02]-突破简单防御 [0x02a]-绕过MAC过滤[0x02b]-发觉隐藏的SSID [0x02c]-嗅探空中信息 ...
IT猿
·
2020-03-27
无线网络
渗透
之旅
跨边同边网络效应
https://www.jianshu.com/p/29079ace6578网络效应分两类,一类是跨边网络效应(越多的“供给端”使得“需求端”的体验更好,或者反方向);一类是同边网络效应(越多的“需求端”,使得“需求端”的体...
IT猿
·
2020-03-27
跨边
同边
网络
效应
elk + filebeat,6.3.2版本简单搭建,实现我们自己的集中式日志系统
刚从事开发那段时间不习惯输出日志,认为那是无用功,徒增代码量,总认为自己的代码无懈可击;老大的叮嘱、强调也都视为耳旁风,最终导致的结果是我加班排查问题,花的时间还挺长的,要复现问题、排查问题等,幸亏那是公司内部员工用的系统,时间长一点也没什么大问题,但是如果是针对客户的,时间就代表很多东西了,那造成的影响就非常大了...
IT猿
·
2020-03-27
elk
filebeat
6.3.2
版本
简单
Java 网络编程:必知必会的 URL 和 URLConnection
java.net.URL类将URL地址进行了封装,并提供了解析URL地址的基本方法,比如获取URL的主机名和端口号。java.net.URLConnection则代表了应用程序和URL之间的通信链接,可用于读取和写入此URL引用的资源。URLConnection看起来只是比URL多了一个Connection,它们之间的...
IT猿
·
2020-03-26
Java
网络编程
必知
会的
URL
Java Socket:飞鸽传书的网络套接字
在古代,由于通信不便利,一些聪明的人就利用鸽子会飞且飞得比较快、会辨认方向的优点,对其进行了驯化,用来进行消息的传递——也就是所谓的“飞鸽传书”。而在Java中,网络套接字(Socket)扮演了同样的角色。套接字(Socket)是一个抽象层,应用程序可以通过它发送或接收数...
IT猿
·
2020-03-26
Java
Socket
飞鸽
传书
网络
android网络优化之添加缓存给服务器减负
引言: 在app的很多实用过程中,经常会出现频繁的刷新操作,这个刷新不是指去更新ui,而是类似打开界面—关闭界面—再打开—再关闭等。这段过程中,并没有实质的数据变化,但是这个操作过程中,却会频繁的调用接口,初始化数据,然后去刷新UI,当然...
IT猿
·
2020-03-26
android
网络
优化
添加
缓存
首页
上一页
...
113
114
115
116
117
...
下一页
尾页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他