#数据清洗

大数据时代之hadoop(五):hadoop 分布式计算框架(MapReduce)

 大数据时代之hadoop(一):hadoop安装大数据时代之hadoop(二):hadoop脚本解析大数据时代之hadoop(三):hadoop数据流(生命周期)大数据时代之hadoop(四):hadoop分布式文件系统(HDFS)      &n...

数据结构——排序算法总结

  排序(Sorting)就是将一组对象依照规定的次序又一次排列的过程,排序往往是为检索而服务的。它是数据处理中一种非常重要也非经常常使用的运算。比如我们日常学习中的查字典或者书籍的文件夹。这些都事先为我们排好序,因此大大减少了我们的检索时间,提高工作效率。  排序可分为两大类:...

【数据可视化-pyecharts】pyecharts快速入门

首先开始来绘制你的第一个图表frompyechartsimportBarbar=Bar("我的第一个图表","这里是副标题")bar.add("服装",["衬衫","羊毛衫","雪纺衫","裤子","高跟鞋","袜子"],[5,20,36,10,75,90])#bar.print_echarts_options()#该...

【PyQt5-Qt Designer】PyQt5+pyecharts 实现GUI界面的数据可视化展示

 fromPyQt5.QtCoreimportQUrlfromPyQt5.QtWidgetsimportQApplication,QWidget,QHBoxLayout,QFramefromPyQt5.QtWebEngineWidgetsimportQWebEngineViewimportsysclassSt...

【python基础】利用pandas处理Excel数据

参考:https://www.cnblogs.com/liulinghua90/p/9935642.html1:pandas依赖处理Excel的xlrd模块,所以我们需要提前安装这个,安装命令是:pipinstallxlrd2:步骤1准备好了之后,我们就可以开始安装pandas了,安装命令是:pipinstallpan...

vue2.0无限滚动加载数据插件

 做vue项目用到下拉滚动加载数据功能,由于选的UI库(element)没有这个组件,就用Vue-infinite-loading这个插件代替,使用中遇到的一些问题及使用方法,总结作记录!安装:npminstallvue-infinite-loading–save引入ES6importInfini...

html只允许输入的数据校验,只允许输入字母汉字数字等

<!DOCTYPEhtmlPUBLIC"-//W3C//DTDXHTML1.0Transitional//EN""http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd"><htmlxmlns="http://www.w3.org/1999/xh...

dede数据库类使用方法 $dsql

dedecms的数据库操作类,非常实用,在二次开发中尤其重要,这个数据库操作类说明算是奉献给大家的小礼物了。引入common.inc.php文件require_once(dirname(__FILE__)."/include/common.inc.php"); 获取一条记录的内容$row=$dsql->...

mysql导数据库用到的语句

将字段格式为2013-08-0913:22:55转换为时间戳UPDATE`AttendClass`SET`regdate`=unix_timestamp(regDate2)WHERE`rowid`=118280; 将字段name前面添加一个字符xupdateaasetname=concat('x',name)...

php连接多数据库

<?php$conn1=mysql_connect('localhost','root','','new_link');$conn2=mysql_connect('localhost','root','','new_link');mysql_select_db('111',$conn1);mysql_select...
IT猿 ·2020-03-27

城市数据大脑:大数据让城市有了思想

【数据猿导读】 在云栖大会开幕式上,杭州城市数据大脑正式发布。通过人工智能,为这座拥有2200多年历史的城市建立一个指挥中心——城市数据大脑。9月,城市大脑交通模块在杭州萧山区市心路投入使用。初步试验数据显示:通过智能调节红绿灯,道路车辆通行速度平均提升了3%至5%,在部分路段有11%...

《海量日志数据分析与应用》之社交数据分析:好友推荐

摘要: 本文通过MR算法来对社交数据进行分析,并在DataIDE中调用,完成好友推荐。上一节:1、场景介绍及技术点分析2、数据采集:日志数据上传3、数据加工:用户画像4、数据分析展现:可视化报表及嵌入应用...

《海量日志数据分析与应用》之报表分析与展现

摘要: 上一篇我们讲到如果对日志数据中的用户信息做画像分析,那么接下来,我们看看如何通过QuickBI完成整个画像分析过程做报表展现。上一节:1、场景介绍及技术点分析2、数据采集:日志数据上传3、数据加工:用户画像下一个:5、社交数据分析:好友推荐...

《海量日志数据分析与应用》之数据采集

摘要: 本文主要介绍了各种数据采集的方法,并重点对日志数据的上传进行了讲解。文章中提到的链接如下:1、更多数据集成方案,详见:https://data.aliyun.com/solution/cdp2、DataX开源项目地址:https://github.com/alibaba/DataX3、DataX工具包...

数据接口-免费版(股票数据API)

获取股票数据的源头主要有:数据超市、雅虎、新浪、Google、和讯、搜狐、ChinaStockWebService、东方财富客户端、证券之星、网易财经。2016年5月6日更新。根据最近频繁出现的数据超市,可以无限制获取相关数据,而不再需要使用爬虫等方式获取,这样不仅节省了极大资源,也有利于遍历数据。具体的方法不再赘述,...
首页上一页...397398399400401...下一页尾页