#淘宝数据魔方技术架构解析

java 非缓冲与缓冲数据写入比较

//非缓冲计时packagecom.swust;importjava.io.*;/**功能:创建一个程序,写10000个随机双精度的数到一个文件中,同时测试运用缓冲和非缓冲技术*进行这种操作所需要的时间*分析:*写双精度数到磁盘中的代码和之前文章类似。在写开始操作之前,先获取当前时间*再将它同操作结束后的时间作比较,以...

java 文件操作 读取字节级数据(读取)

packagecom.swust;importjava.io.*;/**功能:按照双精度浮点型、整型、布尔型、字符型、和字符串型的顺序从名为sample.dat文件读取数据*分析:用FileInputStream类创建一个输出流的实例作为一个“流”*将该实例作为DataInputStream对象...

java流和文件 保存字节级数据(写)

重要的知识点:流的概念: 从数据源到I/O类的输入流(in)      从I/O类到数据接收器的输出流(out)I/O包含子类较多的有四大家族:InputStream,OutputStream,Reader和Write类      ...

Mybatis根据数据库中的表自动生成Bean对象与Mapper文件 (小白式教程)

示例IDE采用IDEA//**********************华丽的分割线****************//1.新建一个java项目-->在Src目录下创建3个包(Package)与一个文件夹(Directory)Package(包)-①bean:存放自动生成的JavaBean②mapper:存放自动生...

使用tushare获取股票实时分笔数据延时有多大

前几天分享了一段获取所有股票实时数据的代码,有用户积极留言,提出一个非常棒的问题:如果数据本生的延时非常严重,通过代码获取数据再快又有什么用呢?一直以来我也只是直观感觉延时并不是很长,但没有做过详细的统计,今天统计一下通过上一篇文章分享的方法获取的实时数据,究竟延时有多大。今天实验用的数据是今天(2017-12-12)...

5行代码实现1秒内获取一次所有股票的实时分笔数据

 前两篇文章分别简单介绍了tushare这个财经数据接口包的使用,用起来很简单顺手,一两句代码就可以获取到你想的要的数据,但是有在群里经常看到说获取数据经常挂,延迟很严重等等,其实那是因为使用者没有好好去领悟和了解工具。片面两篇文章已经对tushare如何获取股票的历史数据和实时数据有过简单的介绍,没看过的朋...

python分别使用多线程和多进程获取所有股票实时数据

  前一天简单介绍了python怎样获取历史数据和实时分笔数据,那么如果要获取所有上市公司的实时分笔数据,应该怎么做呢? 肯定有人想的是,用一个列表存储所有上市公司的股票代号,然后无限循环获取不就得了吗? 现在深市和沪市的股票一共有3400多只,如果你真这样做的话,获取一次所有股...

使用tushare获取股票历史数据和实时分笔数据

使用tushare获取股票历史数据和实时分笔数据 财经数据接口包tushare的使用(一)Tushare是一款开源免费的金融数据接口包,可以用于获取股票的历史数据、年度季度报表数据、实时分笔数据、历史分笔数据,本文对tushare的用法,已经存在的一些问题做一些介绍。 一:安装tushare为避免由...

Flashtext:大规模数据清洗的利器

 在这篇文章中,我们将介绍一种新的关键字搜索和替换的算法:Flashtext算法。Flashtext算法是一个高效的字符搜索和替换算法。该算法的时间复杂度不依赖于搜索或替换的字符的数量。比如,对于一个文档有N个字符,和一个有M个词的关键词库,那么时间复杂度就是 O(N) 。这个算法比我们一...

阿里巴巴年度技术总结:人工智能在搜索的应用和实践

雷锋网 百家号01-0110:55AI科技评论按:本文作者为阿里巴巴搜索事业部总监欧文武,经阿里巴巴授权发布。以深度学习为代表的人工智能在图像、语音和NLP领域带来了突破性的进展,在信息检索和个性化领域近几年也有不少公开文献,比如wide&deep实现了深度模型和浅层模型的结合,dssm用于计算语义相关...

中国目前未掌握的核心技术有哪些

  近些年,中国在科技领域的进步很快,也让无数中国人深感自豪。然而,大家是否思考过一个问题:中国目前还未掌握的核心技术有哪些?在知乎,各个领域的“大神”给出了一些答案,结果令人震惊。这些答案比较专业,估计会有很多人看不太懂。但简单来说就是一句话:中国还未掌握的核心技术,还有很多,绝对超出你的想象...

2017数据科学报告:机器学习工程师年薪最高,Python最常用

  2017-11-0311:05数据平台Kaggle近日发布了2017机器学习及数据科学调查报告,针对最受欢迎的编程语言、不同国家数据科学家的平均年龄、不同国家的平均年薪等进行深度调查。此次调查共收到16000余份回复。以下「AI脑力波」小编对该报告数据进行了梳理编译,供大家参考。年龄从全球范围来...

大数据等最核心的关键技术:32个算法

大数据等最核心的关键技术:32个算法转载2016年12月11日22:24:05A*搜索算法——图形搜索算法,从给定起点到给定终点计算出路径。其中使用了一种启发式的估算,为每个节点估算通过该节点的最佳路径,并以之为各个地点排定次序。算法以得到的次序访问这些节点。因此,A*搜索算法是最佳优先搜索的范...

Zsh vs. Bash不完全对比解析,zsh是一种更强大的被成为“终极”的Shell

https://www.zhihu.com/question/214184492014-10-07 bdpqlxz  已经有不少人写过类似“为什么Zsh比Bash好”“为什么Zsh比*shell好”的文章了,讲解如何配置Zsh或折腾各种oh-...

美团点评数据库高可用架构的演进与设想

金龙 ·2017-06-2920:11本文介绍最近几年美团点评MySQL数据库高可用架构的演进过程,以及我们在开源技术基础上做的一些创新。同时,也和业界其它方案进行综合对比,了解业界在高可用方面的进展,和未来我们的一些规划和展望。在2015年之前,美团点评(点评侧)长期使用MMM(Master-...
首页上一页...544545546547548...下一页尾页