python不仅内置了multiprocess模块，而且还内置了asyncio和concurrent模块。除了要分析这两个内置的，其实我们还要再下面另一个第三方joblib包。我们经常喜欢单机处理数据，或者数据量一大就采用分布式的方式，其实并发编程是一个很好的选择。asyncioconcurrentjoblib但是第一...

什么是web框架？Web框架（Webframework）是一种开发工具，用来支持动态网站、网络应用和网络服务的开发。大多数的web框架提供了一套开发和部署网站的方式，也为web行为提供了一套通用的方法。web框架已经实现了很多功能，开发人员使用框架提供的方法并且完成自己的业务逻辑，就能快速开发web应用了。浏览器和服务...

推导式comprehensions（又称解析式），是Python的一种独有特性。推导式是可以从一个数据序列构建另一个新的数据序列的结构体。共有三种推导，在Python2和3中都有支持：列表(list)推导式字典(dict)推导式集合(set)推导式一、列表推导式1、使用[]生成list基本格式var=[out_exp_...

 %timeit #Insert100,000valuesatthefrontofthelist(index=0)c0=[]t_insert=%timeit-o-n1000-r100c0.insert(0,'a')#Append100,000valuesattheendofthelistc1=[]t...

 程序并不能单独运行，只有将程序装载到内存中，系统为它分配资源才能运行，而这种执行的程序就称之为进程。程序和进程的区别就在于：程序是指令的集合，它是进程运行的静态描述文本；进程是程序的一次执行活动，属于动态概念。在多道编程中，我们允许多个程序同时加载到内存中，在操作系统的调度下，可以实现并发地执行，大大提高了...

作为一个数据工程师，最喜欢的事情就是不停的在现实的服务端环境调试代码的参数。我们在本地的环境与生产的状况决然不同，我们一开始在本地写代码测试再部署到服务端的三板斧就不适用了。 最好的方式可以直接在linux环境下的服务端直接写代码，分步调试。之前我在银行都是使用集成在CDSW的环境IDE，但是如今我们需要自己...

在python的运行时,sys.argv[0],存了当前脚本的运行路径包括文件名pythontest.py则：sys.argv[0]=>test.pypythondirname1/dirname2/test.py则：sys.argv[0]=>dirname1/dirname2/test.pypython/c...

 __new__()是在新式类中新出现的方法，它作用在构造方法建造实例之前，可以这么理解，在Python中存在于类里面的构造方法__init__()负责将类的实例化，而在__init__()启动之前，__new__()决定是否要使用该__init__()方法，因为__new__()可以调用其他类的构造方法或者...

做了一个excel的风控模板，里面含有宏，我用python的第三方xlwings部署到linux后发现，linux环境并不支持xlwings。Python程序都是脚本的方式，一般是在解析器里运行，如果要发布出去，需要提前安装解析器才可以运行。那么只能退而求其次，把所有代码封装成一个.exe文件直接给运营，当他有需要的时...

什么是POP3协议：POP3是PostOfficeProtocol3的简称，即邮局协议的第3个版本,它规定怎样将个人计算机连接到Internet的邮件服务器和下载电子邮件的电子协议。它是因特网电子邮件的第一个离线协议标准,POP3允许用户从服务器上把邮件存储到本地主机（即自己的计算机）上，同时删除保存在邮件服务器上的邮...

 numpy.array插入一行或一列importnumpyasnpa=np.array([[1,2,3],[4,5,6],[7,8,9]])b=np.array([[0,0,0]])c=np.insert(a,0,values=b,axis=0)d=np.insert(a,0,values=b,axis=1...

  pandas设计时应该是早就考虑到了这些可能存在的问题，所以在read功能中设计了块读取的功能，也就是不会一次性把所有的数据都放到内存中来，而是分块读到内存中，最后再将块合并到一起，形成一个完整的DataFrame。defread_sql_table(table_name,con,schema=...

xlwings能够非常方便的读写Excel文件中的数据，并且能够进行单元格格式的修改可以和matplotlib以及pandas无缝连接可以调用Excel文件中VBA写好的程序，也可以让VBA调用用Python写的程序。   常用函数和方法Book工作簿常用的apiwb=xw.books[‘...

*.py：源码文件，由Python程序解释。*.pyc：源码经编译后生成的二进制字节码（Bytecode）文件。*.pyo：优化编译后的程序，也是二进制字节码文件。 虚拟机怎么执行py脚本：完成模块的加载和链接；将源代码翻译为PyCodeObject对象（这就是字节码），并将其写入内存当中（方便CPU读取，起...

输入jupyternotebook--generate-config   会生成jupyter_notebook_config.py 找到文件，并打开 将#c.NotebookApp.notebook_dir=''改为c.NotebookApp.notebook_dir...