#大数据存储与处理

《海量日志数据分析与应用》之社交数据分析:好友推荐

摘要: 本文通过MR算法来对社交数据进行分析,并在DataIDE中调用,完成好友推荐。上一节:1、场景介绍及技术点分析2、数据采集:日志数据上传3、数据加工:用户画像4、数据分析展现:可视化报表及嵌入应用...

《海量日志数据分析与应用》之报表分析与展现

摘要: 上一篇我们讲到如果对日志数据中的用户信息做画像分析,那么接下来,我们看看如何通过QuickBI完成整个画像分析过程做报表展现。上一节:1、场景介绍及技术点分析2、数据采集:日志数据上传3、数据加工:用户画像下一个:5、社交数据分析:好友推荐...

《海量日志数据分析与应用》之数据采集

摘要: 本文主要介绍了各种数据采集的方法,并重点对日志数据的上传进行了讲解。文章中提到的链接如下:1、更多数据集成方案,详见:https://data.aliyun.com/solution/cdp2、DataX开源项目地址:https://github.com/alibaba/DataX3、DataX工具包...

数据接口-免费版(股票数据API)

获取股票数据的源头主要有:数据超市、雅虎、新浪、Google、和讯、搜狐、ChinaStockWebService、东方财富客户端、证券之星、网易财经。2016年5月6日更新。根据最近频繁出现的数据超市,可以无限制获取相关数据,而不再需要使用爬虫等方式获取,这样不仅节省了极大资源,也有利于遍历数据。具体的方法不再赘述,...

数据结构——二叉搜索树

上次写的栈和队列还是一个多月前,鸽了这么久终于自觉要回来把数据结构写下去。。前几篇文章介绍了主要的几种线性结构,本篇开始进入树(tree)结构。树结构是由n(n>0)个有限节点组成一个具有层次关系的集合。把它叫做“树”是因为它看起来像一棵倒挂的树,也就是说它是根朝上,而叶朝下的。它具有以下...

数据结构——队列和栈

队列是一种特殊的线性表,它只允许在表的前端(front)进行删除(出队)操作,而在表的后端(rear)进行插入(入队)操作。栈又名堆栈,它和队列一样也是一种运算受限的线性表。限定仅在表尾进行插入和删除操作的线性表。这一端被称为栈顶,相对地,把另一端称为栈底。与先进先出队列相比,栈的运作模式是后进先出。栈和链表属于线性表...
IT猿 ·2020-03-27

数据结构——链表

 链表是一种物理存储结构上非连续、非顺序的存储结构,数据元素的逻辑顺序是通过链表中的指针链接次序实现的。节点维护变量data和next,分别用于存储数据和指向下一个节点。C#:classNode<T>{privateTdata;privateNode<T>next;publicTDat...
IT猿 ·2020-03-27

数据结构——数组

  数组是程序中最常见的数据结构,它可以存储一个固定大小的相同类型元素的顺序集合(强类型语言)。数组的元素都是由连续的内存位置组成。最低的地址对应第一个元素,最高的地址对应最后一个元素,通过索引可以非常容易找到某一个元素。  大多数时候我们需要使用一个大小可变的数组(C#、Python中的list),本文就基于数组来实...
IT猿 ·2020-03-27

【phpstudy2016】apache配置Tp5.0,获取表单数据总是多了一个路由变量,解决

1、用的apahce配置tp5.0的php环境2、发现input()过来的数据,总是多了一个变量,那就是路由变量,类似【array(2){["/index/index/form_submit_html"]=>string(0)""["username"]=>string(6)"sakura"}???????...

json数据解析

1、json文本和json对象的区别json文本是符合json格式的文本,是一个字符串json对象是内存中的一个对象,拥有属性和方法,可以通过对象获取其中的参数信息python中一般来说json对象是指字典python中字典格式和json格式区别:字典中的引号支持单引号和双引号,JSON格式只支持双引号字典中的True...
IT猿 ·2020-03-27

Loadrunner 参数化数据分配方法以及数据更新方式

数据分配方式分配方法描述Sequential(顺序)“顺序”方法顺序的向Vuser分配数据。当正在运行的Vuser访问数据表时,会提取下一个可用的数据。如果没有足够的数据,则VuGen返回到表中的第一个值,循环继续直到测试结束Random(随机)“随机”方法为每一个Vus...

mysql 复制表结构和数据时一定要注意细节

  MySQL5.2版本复制数据表到MYSQL5.5版本如果你的自增长ID是从0开始复制表到5.5版本不会从0开始而是从1开始了 ...

docker-5-容器数据卷

一句话:有点类似我们Redis里面的rdb和aof文件 先来看看Docker的理念:* 将运用与运行的环境打包形成容器运行 ,运行可以伴随着容器,但是我们对数据的要求希望是持久化的* 容器之间希望有可能共享数据 Docker容器产生的数据,如果不通过dockercomm...

21、整合Druid数据源

1)、引入外部的数据源(Druid)<!--https://mvnrepository.com/artifact/com.alibaba/druid--><dependency><groupId>com.alibaba</groupId><artifactId>...

20、Springboot 与数据访问(JDBC/自动配置)

简介:对于数据访问层,无论是SQL还是NOSQL,SpringBoot默认采用整合SpringData的方式进行统一处理,添加大量自动配置,屏蔽了很多设置。引入各种xxxTemplate,xxxRepository来简化我们对数据访问层的操作。对我们来说只需要进行简单的设置即可。我们将在数据访问章节测试使用SQL相关、...
首页上一页...531532533534535...下一页尾页