1.将mysql中的数据导入到hive中sqoopimport--connectjdbc:mysql://localhost:3306/sqoop--direct--usernameroot--password123456--tabletb1--hive-tabletb1--hive-import-m1其中--tabl...

一：读取数据的函数 　1.读取csv文件 importnumpyasnpimportpandasaspddata=pd.read_csv("C:\Users\Administrator\Desktop\result.csv",encoding="utf-8")#这里需要注意路径必须用\斜杠，斜杠显示...

一：pandas两种数据结构：series和dataframe　　series:索引（索引自动生成）和标签（人为定义）组成---返回一个对象obj=pd.Series([1,2,3,4])obj#结果01122334dtype:int64obj=pd.Series(["姓名","年龄","身高","体重"])obj#结...

一：json模块json模块的作用就是讲json字符串（"{"a":1,"b":1}"）和python能够识别的字典进行相互转换。importjsonimportpicklea="""{'a'::1,'c':2}"""ret=json.loads(a)print(ret)#结果json.decoder.JSONDeco...

一：Numpy#数组和列表的效率问题，谁优谁劣#1.循环遍历importnumpyasnpimporttimemy_arr=np.arange(1000000)my_list=list(range(1000000))defarr_time(array):s=time.time()for_inarray:_*2e=tim...

#TODOselenium已经被检测出来 importrandomimportreimporttimefromseleniumimportwebdriverfromselenium.webdriver.common.byimportByfromselenium.webdriver.support.uiimpo...

一.urllib库中将字典转化为url的查询参数二.请求异常的处理，以及内部的判断逻辑　　1.返回的json数据为空：原因是requests的请求对象没有加请求头和cookiesimportrequestsfromurllib.parseimporturlencodedefget_page_index():data={...

这是一个有趣的项目，关于bra销售数据分析的。是网络爬虫和数据分析的综合应用项目。从淘宝抓取bra销售数据，并将这些数据保存到SQLite数据库中，然后对数据进行清洗，最后通过SQL语句、Pandas和Matplotlib对数据进行数据可视化分析。我们从分析结果中可以得出很多有的结果，例如，中国女性胸部标准尺寸是多少；...

XPath数据类型 　　XPath可分为四种数据类型： 　　节点集(node-set) 　　节点集是通过路径匹配返回的符合条件的一组节点的集合。其它类型的数据不能转换为节点集。 　　布尔值(boolean) 　　由函数或布尔表达式返回的条件匹配值，与一般语言中的布尔值相...

书接前文前文中仅是WPF验证中的一种，我们暂且称之为View端的验证（因为其验证规是写在Xaml文件中的）。还有一种我们称之为Model端验证，Model通过继承IDataErrorInfo接口来实现，这个还没研究透，后面补上。WPFMVVMModel端验证-待续今天的主要内容是MVVM下的数据验证，主要使用View端...

WPF的Binding使得数据能够在数据源和目标之间流通，在数据流通的中间，便能够对数据做一些处理。数据转换和数据验证便是在数据从源到目标or从目标到源的时候对数据的验证和转换。ValidationRule验证规则WPF中提供了一个抽象类ValidationRule，我们自定义的验证规则都需要继承它，然后实现它的抽象方...

namespaceData.TEST{   ///<summary>   ///数据操作基类   ///</summary>   publicabstractclassTEST...

namespaceData{   ///<summary>   ///数据库建立工厂   ///CreatedBy:张占岭   ///CreatedDate：2011-10-14 ...

好长时间没有写博客了，最近公司要用java语言，开始学习java，属于初学者，今天主要记录一下mybatisgenerator自动生成代码，首先在如下图的目录中新建两个文件，如下图 generatorConfig.xmland jdbc.properties都要放在resource根目录下具体gen...

这里演示的是h2databse示例，所以简单的介绍普及下h2database相关知识H2数据库是一个开源的关系型数据库。H2是一个嵌入式数据库引擎，采用java语言编写，不受平台的限制，同时H2提供了一个十分方便的web控制台用于操作和管理数据库内容。它还提供兼容模式，可以兼容一些主流的数据库，因此采用H2作为开发期的...