#Python

Python爬虫之关于登录那些事

常见的登录方式有以下两种:查看登录页面,csrf,cookie;授权;cookie直接发送post请求,获取cookie上面只是简单的描述,下面是详细的针对两种登录方式的时候爬虫的处理方法这种例子其实也比较多,现在很多网站的登录都是第一种的方法,这里通过以github为例子:分析页面获取authenticity_tok...

python 单例模式

单例设计模式是怎么来的?在面向对象的程序设计中,当业务并发量非常大时,那么就会出现重复创建相同的对象,每创建一个对象就会开辟一块内存空间,而这些对象其实是一模一样的,那么有没有办法使用得内存对象只创建一次,然后再随处使用呢?单例模式就是为了解决这个问题而产生的。实现方式:1、创建一个类静态字段(类变量)__instan...
代码星球 ·2020-04-07

day 17python 面对对象之继承

比较官方的说法就是:继承(英语:inheritance)是面向对象软件技术当中的一个概念。如果一个类别A“继承自”另一个类别B,就把这个A称为“B的子类别”,而把B称为“A的父类别”也可以称“B是A的超类”。继承可以使得子类...

python --爬虫--爬取百度翻译

importrequestsimportjsonclassbaidufanyi:def__init__(self,trans_str):self.lang_detect_url='https://fanyi.baidu.com/langdetect'#语言检测地址self.trans_str=trans_strself...

利用python 学习数据分析 (学习四)

内容学习自:PythonforDataAnalysis,2ndEdition     就是这本纯英文学的很累,对不对取决于百度翻译了前情提要:各种方法贴:  https://www.cnblogs.com/baili-luoyun/p/10250177.html    ...

利用python 学习数据分析 (学习三)

内容学习自:PythonforDataAnalysis,2ndEdition     就是这本纯英文学的很累,对不对取决于百度翻译了前情提要:各种方法贴:  https://www.cnblogs.com/baili-luoyun/p/10250177.html   本...

利用python 学习数据分析 (学习二)

内容学习自:PythonforDataAnalysis,2ndEdition     就是这本纯英文学的很累,对不对取决于百度翻译了前情提要:各种方法贴:  https://www.cnblogs.com/baili-luoyun/p/10250177.html    ...

利用python 学习数据分析 (学习一)

内容学习自:PythonforDataAnalysis,2ndEdition     就是这本纯英文学的很累,对不对取决于百度翻译了前情提要:各种方法贴:  https://www.cnblogs.com/baili-luoyun/p/10250177.html    ...

python 爬虫 黑科技

1.最基本的抓站importurllib2content=urllib2.urlopen('http://XXXX').read() 2.使用代理服务器这在某些情况下比较有用,比如IP被封了,或者比如IP访问的次数受到限制等等。12345import urllib2proxy_support&nbs...
代码星球 ·2020-04-07

python的ConfigParser模块

转自:https://blog.csdn.net/gexiaobaohelloworld/article/details/7976944简介ConfigParser模块在python3中修改为configparser.这个模块定义了一个ConfigParser类,该类的作用是使用配置文件生效,配置文件的格式和windo...
代码星球 ·2020-04-07

python 学习资料 常用

https://www.cnblogs.com/vamei/archive/2012/09/13/2682778.html 利用python进行数据分析第二版https://www.jianshu.com/p/04d180d90a3f  django和各种混搭https://blog.cs...
代码星球 ·2020-04-07

python --爬虫基础 --爬取今日头条 使用 requests 库的基本操作, Ajax

'''思路一:由于是Ajax的网页,需要先往下划几下看看XHR的内容变化二:分析js中的代码内容三:获取一页中的内容四:获取图片五:保存在本地使用的库1.requests网页获取库2.fromurllib.parseimporturlencode将字典转化为字符串内容整理拼接到url3.os操作文件的库4.fromha...

python --爬虫基础 --爬猫眼top 100 使用 requests 库的基本操作

importrequestsimportreimportjsonimporttimedefget_page(url):#获取页数headers={'User-Agent':'Mozilla/5.0(WindowsNT6.1;WOW64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/...

python基础知识梳理-----7函数

基本内容梳理  1:函数定义,函数名,函数体以及函数的调用方式  2:函数的返回值  3:函数的参数  4:函数---动态传参数  5:名称空间,局部名称的加载顺序,全局名称空间,作用域,加载顺序  6:函数的嵌套  7:gloabal,nonlcal关键字一:函数的定义,函数名,函数体以及函数的调用方式1:使用def...

python基础知识梳理----6set 集合的应用

集合内容简介:set一:集合简介集合set集合是python的一个基本数据类型.一般不是很常用set.中的元素是不重复的.无序的.里里面的元素必须是可hash的tuple,bool),str,(int,我们可以这样来记set.就是dict类型的数据但是不保存value,只保存setkey.也用表示{} ...
首页上一页...311312313314315...下一页尾页