51
Dev开发社区
首页
文章
问答
工具
搜索
登录
注册
#包网络
网络爬虫之:Scrapy使用详解(二)-scrapy小爬虫诞生记
一、前言:前面一章我们讲述了Scrapy爬虫安装的的过程以及独立空间的创建。本次我们的目标是没有蛀牙!本次我们的目标是没有蛀牙!本次我们的目标是没有蛀牙!好吧,不要打我,我们的目标是了解scrapy项目的结构及通过一个小爬虫来验证其到底有多好用!二、scrapy项目结构首先,我们先执行scrapy命令创建一个scrap...
代码星球
·
2020-04-02
爬虫
网络
Scrapy
使用
详解
网络
1.Socket 通信,网络套接字通过ip地址,找到主机,两台主机上,各选择一个端口,在端口上通信 2.服务端Socket ServerSocket 被动的等待客户端发起连接,并与客户端建立Socket连接通道3.Socket 客户端向服务端发起连接 建立的Socket连接通道 客户端持有一个So...
代码星球
·
2020-04-02
网络
FEC(Forward Error Correction)前向纠错 UDPRTP 中使用用于改善无线等网络丢包等问题--转
FEC(ForwardErrorCorrection)前向纠错UDPRTP中使用用于改善无线等网络丢包等问题算法暂不介绍。思路:FECENCODE增加冗余包,当无线等网络丢包之后,接收端使用冗余包可将丢失的包DECODE出来。举例:10个包,编码后会增加2个包,共12个包发送到接收端,接收端丢失第5和第9包,仅靠剩下的...
代码星球
·
2020-04-02
FEC
Forward
Error
Correction
纠错
在VMware的虚拟机平台上如何进行网络设置
1.本文构建的是这样一个网络,有两台winXP系统的PC,处于同一局域网内,PC里都装有VMware虚拟机,虚拟机上跑的是RedhatLinux9,我们想要在winXP系统下访问本机的虚拟机linux系统,以及也要能够访问另一台PC里的虚拟linux系统。由于我们这个局域网又不允许再分配同一网段的IP地址,因此不能用桥...
代码星球
·
2020-04-01
VMware
虚拟机
台上
如何
进行
你不知道网络安全有多严峻
上周六受到企业的邀请讲网络安全,这篇博客是内容的整理。随着大数据、AI(人工智能)与互联网络的高速发展新的网络安全问题变得越来越严峻,自己身边时不时总有人被网络诈骗,为了更少的人被攻击写了这些文字。 我国从事网络与电信诈骗人数:160万我国去年网络与电信涉案金额:1152亿大学生防网络与电信诈骗合格数不足:3...
代码星球
·
2020-04-01
不知道
网络安全
有多
严峻
笔记之Python网络数据采集
非原创即采集一念清净,烈焰成池,一念觉醒,方登彼岸网络数据采集,无非就是写一个自动化程序向网络服务器请求数据,再对数据进行解析,提取需要的信息通常,有api可用,api会比写网络爬虫程序来获取数据更加方便.Chapter1初建网络爬虫一旦你开始采集网络数据,就会感受到浏览器为我们所做的所有细节,它解释了所有的html,...
代码星球
·
2020-03-29
笔记
Python
网络
数据采集
记 FineUI 官方论坛所遭受的一次真实网络攻击!做一个像 ice 有道德的黑客!
可能是最近在参加CSDN举行的那个评选,FineUI论坛吸引了一大批围观群众,也吸引了一些黑客的目光,本文会按时间顺序记录下FineUI论坛所遭受的这次网络攻击,期望能对其他站长有所帮助。 2013-6-2208:56早上起来,像往常一样打开FineUI官网论坛(http://fineui.com/bbs/)...
代码星球
·
2020-03-29
FineUI
官方
论坛
遭受
一次
计算机网络(谢希仁版)--数据链路层
数据链路层: 1.使用点对点信道的数据链路层: 1.数据链路: 数据链路除了物理线路外,还必须有通信协议来控制这些数据的传输。若把实现这些协议的硬件和软件加到链路上,就构成了数据链路。 现在最常用的方法是使用适配器(即网卡)来实现这些协议的硬件和软件。 一般的适配器都包括了数据链路层和物理层这两层的功能。...
代码星球
·
2020-03-29
计算机网络
谢希仁
数据
链路
计算机网络(谢希仁版)--应用层
应用层: 1.域名系统(DNS): 1.概述: 许多应用层软件经常直接使用域名系统DNS(DomainNameSystem),但计算机的用户只是间接而不是直接使用域名系统。 因特网采用层次结构的命名树作为主机的名字,并使用分布式的域名系统DNS。 名字到IP地址的解析是由若干个域名服务器程序完...
代码星球
·
2020-03-29
计算机网络
谢希仁
应用层
计算机网络(谢希仁版)--网络层
网络层: 1.网络层概述: 1.网络层向上只提供简单灵活的、无连接的、尽最大努力交付的数据报服务。 2.网络层的协议: 网际协议IP是TCP/IP体系中两个最主要的协议之一。与IP协议配套使用的还有三个协议: 地址解析协议ARP(AddressResolutionProtocol) 网际控制报文...
代码星球
·
2020-03-29
计算机网络
谢希仁
网络
计算机网络(谢希仁版)--运输层
运输层概述: 网络层是为主机之间提供逻辑通信,而运输层是为应用进程之间提供端到端的逻辑通信。 网络层只对IP数据报的首部进行检验,而运输层对协议的首部和数据部分都进行检验。 运输层有两种不同的运输协议:一对一的可靠的面向连接的TCP和不可靠的无连接的UDP,两者对应的数据单元分别是TCP报文段和UDP用户数据报。...
代码星球
·
2020-03-29
计算机网络
谢希仁
运输
php保存网络图片到本地
//保存网络图片functiongetimg($url){$state=@file_get_contents($url,0,null,0,1);//获取网络资源的字符内容if($state){$filename='./caiji/'.time().rand(1000,9999).'.jpg';//文件名称与路径ob_s...
代码星球
·
2020-03-28
php
保存
网络
图片
本地
基础笔记12(socket,url网络通信)
进一步深入socket1.网络通信条件:1.IP地址,可用主机名。2.传输数据时将不用的应用程序通过数字标识区分开来,这种标识称为逻辑端口,也称端口。(0-65535端口,一般系统预留0-1024)3.通信规则,即协议。国际通用协议(tcp/ip)1.1网络访问中,会首先通过DNS服务器将域名解析成IP地址再进行访问....
IT猿
·
2020-03-28
基础
笔记
socket
url
网络通信
ip地址的组成(网络位+主机位)
IP地址采用分层结构;IP地址是由网络号(netID)与主机号(hostID)两部分组成的。 根据不同的取值范围,IP地址可以分为五类;IP地址中的前5位用于标识IP地址的类别:A类地址的第一位为0;B类地址的前两位为10;C类地址的前三位为110;D类地址的前四位为1110;E类地址的前五位为11110。&...
IT猿
·
2020-03-28
ip
地址
组成
网络
机位
网络学习目录
博客目录总纲首页 1、华为ensp使用网络知识详解linux三种网络原理及原理图解网络虚拟化之概念篇计算机网络——网络硬件和网络设备及其工作原理史上最全!图解浏览器的工作原理局域网基本原理大型企业网络架构TCP/IP协议(二)tcp/ip基础知识&n...
IT猿
·
2020-03-28
网络
学习
目录
首页
上一页
...
72
73
74
75
76
...
下一页
尾页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他