51
Dev开发社区
首页
文章
问答
工具
搜索
登录
注册
#S
爬虫实战【8】Selenium解析淘宝宝贝-获取多个页面
作为全民购物网站的淘宝是在学习爬虫过程中不可避免要打交道的一个网站,而是淘宝上的数据真的很多,只要我们指定关键字,将会出现成千上万条数据。今天我们来讲一下如何从淘宝上获取某一类宝贝的信息,比如今天我们以“手机”作为关键词,举个例子。【插入图片,淘宝手机页面示意】上面是搜索框,下面显示了很多宝贝信息,最下面是翻页的控制按...
ymnets
·
2020-03-25
爬虫
实战
Selenium
解析
淘宝
爬虫入门【7】Python-文件的读写和JSON
最重要的open()方法将返回一个file对象,经常使用的两个参数为open(filename,mode)其中,filename为file保存的地址,可以是本地地址,相对地址或者绝对地址。mode对象为对file对象进行的操作'''对这个方法进行一些解释open(file,mode='r',buffering=None...
ymnets
·
2020-03-25
爬虫
入门
Python-
文件
读写
爬虫入门【6】Selenium用法简介
一句话,自动化测试工具。它支持各种浏览器,包括Chrome,Safari,Firefox等主流界面式浏览器。如果你在这些浏览器里面安装一个Selenium的插件,那么便可以方便地实现Web界面的测试。换句话说叫Selenium支持这些浏览器驱动。我们在Python里面安装Selenium的话,就可以调用浏览器来访问we...
ymnets
·
2020-03-25
爬虫
入门
Selenium
用法
简介
爬虫入门【3】BeautifulSoup4用法简介
首先创建一个我们需要解析的html文档,这里采用官方文档里面的内容:html_doc="""<html><head><title>TheDormouse'sstory</title></head><body><p...
ymnets
·
2020-03-25
爬虫
入门
BeautifulSoup4
用法
简介
爬虫入门【2】Requests库简介
使用Requests发送网络请求很简单#首先要导入requests库importrequests#返回一个Response对象r=requests.get('https://github.com/timeline.json')#由此可以看出来Requests的API十分简单,#post请求r=requests.post...
ymnets
·
2020-03-25
爬虫
入门
Requests
简介
爬虫入门【1】urllib.request库用法简介
如何使用urllib库获取网络资料打开指定的URLurllib.request.urlopen(url,data=None,[timeout,]*,cafile=None,capath=None,cadefault=False,context=None)url参数,可以是一个string,或者一个Request对象。d...
ymnets
·
2020-03-25
爬虫
入门
urllib.request
用法
简介
Pandas入门
主要包含两个数据结构,Series和DataFrameSeries类似于一维数组,有数据和索引。默认创建整数型索引。可以通过values和index获取数据和索引。frompandasimportSeries,DataFrameimportpandasaspdimportnumpyasnpobj=Series([4,7...
ymnets
·
2020-03-25
Pandas
入门
HTML使用post方式提交中文内容出现乱码的错误解决方式
今天在做一个例子的时候,使用post方式提交表单,如果有中文的话,在另一个页面显示出来的时候,总是会出现乱码;但是将提交方式改为get的时候,就不会出现这种错误。详细错误见下面图片和代码。HTML代码:1<!DOCTYPEhtml>2<html>3<head>4<m...
ymnets
·
2020-03-25
方式
HTML
使用
post
提交
Python PhatomJS 和Selenium动态加载页面 获取图片内容
如果您觉得感兴趣的话,可以添加我的微信公众号:一步一步学Python![](http://www.51dev.com//FileUpload/news/202003/20200325002543449.jpg)随笔中的代码拷贝自http://www.cnblogs.com/Albert-Lee/p/6275146.ht...
ymnets
·
2020-03-25
Python
PhatomJS
Selenium
动态
加载
C#基础——winform应用上传图片到SQLServer数据库
前言之前通过winform与SQLServer的交互一直局限于文本、数字等信息,都可以通过string的方式来传输,但是比如音乐、图片等特殊格式的文件要如何与SQLServer数据库进行交互呢?今天主要讲通过文件流的方式,将特殊文件转换成二进制,然后存储到数据库中。在实际的应用中,如果文件较大或者较多,直接存储在数据中...
ymnets
·
2020-03-25
基础
winform
应用
上传
图片
C#基础——静态成员,static关键字
当声明一个类成员为静态时,意味着无论创建多少个类的对象,只会有一个该静态成员的副本。关键字static意味着只有一个该成员的实例。静态变量用于定义常量,因为它们的值可以通过直接调用类而不需要创建类的实例来获取。比如,定义类的成员变量为static的:1classStaticVar2{3publicstaticintnu...
ymnets
·
2020-03-25
基础
静态
成员
static
关键字
JSP基础——属性保存范围和request对象
JSP属性保存范围JSP中提供了四种属性保存范围,分别为page,request,session及application。1、page范围,指设置的属性只在当前页面有效。通过pageContext的setAttribute()方法来设置属性,通过pageContext的getAttribute()来取得属性.代码范例:...
ymnets
·
2020-03-25
JSP
基础
属性
保存
范围
JSP基础总结(运行机制、脚本元素、指令元素、动作元素)
JSP的运行机制:1、转译阶段:JSP页面转换成Servlet类;2、请求阶段:Servlet类执行,将相应结果发送至客户端。流程解释:1、用户访问某个JSP页面2、服务器找到相应的JSP页面3、服务器将JSP转译成Servlet的源代码4、服务器将Servlet源代码编译为class文件5、服务器将class文件加载...
ymnets
·
2020-03-25
元素
JSP
基础
总结
运行机制
Servlet3.0 jsp跳转到Servlet 出现404错误的路径设置方法
最近又遇到了这种问题,百度了好久,发现有人说要在action的路径里面写Servlet文件的绝对路径,比如说,单独打开servlet的地址为http://localhost:8080/TomcatTest/LoginConfServlet,那么就在action里面写http://localhost:8080...
ymnets
·
2020-03-25
Servlet3.0
jsp
转到
Servlet
出现
CSS+DIV 设计一个简单的个人网页界面
1*{2margin:0px;3padding:0px;4}56body{7background:#e5e6d0;8}910#header,#menu,#banner,#main,#footer{11margin:0pxauto;12width:1200px;13}14#header{15height:100px;16...
ymnets
·
2020-03-25
CSS+DIV
设计
一个
简单
个人
首页
上一页
...
4785
4786
4787
4788
4789
...
下一页
尾页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他