获取股票数据的源头主要有：数据超市、雅虎、新浪、Google、和讯、搜狐、ChinaStockWebService、东方财富客户端、证券之星、网易财经。2016年5月6日更新。根据最近频繁出现的数据超市，可以无限制获取相关数据，而不再需要使用爬虫等方式获取，这样不仅节省了极大资源，也有利于遍历数据。具体的方法不再赘述，列出来相关网站清单，开发者可自行到这些网站查询调用方法。聚合数据 https://www.juhe.cn/百度API数据 http://apistore.baidu.com/发源地 http://www.finndy.com/笔者这里推荐使用聚合数据，其次配合百度API使用即可。缺点：某些美国节假日数据会短缺；调用次数不能超过每分钟200次，否则会被警告并封锁IP地址；自定义列获取方法只能获取美股数据。优点：数据最标准化，可以获取其他国家市场数据；返回数据类型可自定义组合。方法1：http://table.finance.yahoo.com/table.csv?s=股票代码返回结果：CSV格式的文件，返回列依次是“日期、开盘价、最...

原文：https://www.cnblogs.com/qingqing-919/p/8444816.html 对比使用Charles和Fiddler两个工具及利用Charles抓取https数据（App）实验目的：对比使用Charles和Fiddler两个工具实验对象：车易通App，易销通App实验结果：1.     接口数据呈现方式对比：（1）Charles树状结构呈现于屏幕，清晰易区分（2）Fiddler默认按时间倒叙呈现所有接口数据，不易区分个人觉得图形界面上Charles更易使用，当然可以通过过滤抓取的接口数据，这样Fiddler下也就很容易区分你要找的接口了。2.     针对车易通和易销通App抓取的接口数据全面性对比：（1）    Charles对于https无法直接获取到，可获取的呈现出来也都是乱码，需要安装ssl证书，后面会写具体设置方法。（2）    Fiddler可以直接抓取所...

利用Python3编写爬虫，从笔趣阁抓个小说下载。importreimporturllib.requestimporttimeimporteasyguiasg#输入地址g.msgbox("利用Python3编写爬虫，从笔趣阁抓个小说下载到手机查看")msg="输入小说地址，例如http://www.biquge.com.tw/0_213/"title='爬虫'root=g.enterbox(msg,title)#伪造浏览器headers={'User-Agent':'Mozilla/5.0(WindowsNT6.1;Win64;x64)''AppleWebKit/537.36(KHTML,likeGecko)''Chrome/62.0.3202.62Safari/537.36'}req=urllib.request.Request(url=root,headers=headers)withurllib.request.urlopen(req,timeout=1)asresponse:#大部分的涉及小说的网页都有charset='gbk'，所以使用gbk编码htmls=response....

JS（jQuery）写缓存之：sessionStorage的运用：结果就是讲存储的DOM对象value传到后台PHP，进行foreach(){}解析JSON成二维数组示例页面：http://www.xxxx.com/index.php?ctl=project&act=add_content&id=63图片：          上1和下2     /*我的自述我的项目为何众筹+自定义章节*//*我的自述我的项目为何众筹+自定义章节*/$(function(){$('ul#tabli').bind("mousedown",function(){/*点击叠加样式*/$(this).addClass('active').siblings().removeClass('active');});js_session_mouseup();//点击this自定义章节，siblings()上下排序、删除div自动隐藏click_custom...

1、问题说明　　有一组数据，用来存储图片路径，动态修改图片的路径来上传图片，而小程序JS只能通过事件获取时机和setData方法修改数据来改变view。而用这样写的方式明显是错误的　　 2、解决办法　　字符串拼接...

原文：https://www.cnblogs.com/muhy/p/10493678.html  oracle如何将项目中的表导出后在导入自己的数据库中，这是一个完整的操作，对于数据库备份或在本地查看数据验证数据进场用到，一般情况下我都用dos黑窗口进行操作，简单记录下，毕竟好记性不如烂笔头嘛！　　oracle的imp/exp就相当于oracle数据的还原与备份，利用这个功能我们可以构建两个相同的数据库，一个用于正式的，一个用户测试，一般情况下，我们常用的是将服务器的数据导出来，放在本地进行测试，以便发现问题并改正。　　imp命令可以把本地.dmp文件导入到对应数据库中，不管是本地还是远程的　　exp命令可以把数据从远程服务器中导入到本地，以.dmp进行保存到本地文件夹下　　1、oracle如何导出表？　　步骤一：打开cmd;　　步骤二：语法：exp用户名/密码@服务名tables=表名file=存入本地dmp目标地址log=存入本地log目标地址 owner=要导出的用户名　　　　　　导出表：exptest/test@orcltables=sys_use...

原文：https://blog.csdn.net/aachangs/article/details/87820818 数据库编码问题新手入坑，第一次使用oracle数据库，还是与mysql略有不同，首先在插入数据时的SQL语法有很大不同，mysql写法：1insertintotablenamevalues(%s,%s)oracle中插入写法：1insertintotablename(ITEM_ID,CONTENT)values(:ITEM_ID,:CONTENT)问题描述：mysql和python都是utf-8编码，oracle为SIMPLIFIEDCHINESE_CHINA.ZHS16GBK，想把mysql中的一些数据导入到oracle，琢磨着写个程序来导(毕竟程序猿)，于是就发生了一下错误：1UnicodeEncodeError:'ascii'codeccan'tencodecharactersinposition0-1:ordinalnotinrange(128)问题分析：引起这个问题的原因是编码格式不同，并不是由于python版本的问题引起的（当然，如果你的pytho...

原文：https://blog.csdn.net/kepa520/article/details/7895786原文地址：http://blog.csdn.net/a19881029/article/details/8158082  原文地址：http://blog.csdn.net/a19881029/article/details/81580821，默认情况下，oracle的日志文件记录在$ORACLE/rdbms/log目录下[plain] viewplain copy [oracle@oracle log]$ pwd  /home/oracle/oracle/product/10.2.0/db_1/rdbms/log  日志文件为(alert_<ORACLE_SID>.log)：[plain] viewplain copy [oracle@oracle log]$ ll  总计 ...

oracle11g下载页面：http://www.oracle.com/technetwork/database/enterprise-edition/downloads/index.html，找到适合自己系统的数据库，需要将file1和file2都下载下来，压缩到同一个文件夹下才能进行安装，否则安装不了。接着用免安装的plsql连接数据库试了试，发现没有连接的权限可选，如图直接输入用户名、密码和数据库名，提示如下：说明plsql是不可以直接连接64位oracle数据库，只能连接32位。既然都安装了64位oracle，可不能卸载了再装32位啊，那如何连接64位呢，就只能借助32位客户端实现了。具体方法在此与大家分享一下：1.首先下载32位的oracle客户端下载地址：http://www.oracle.com/technetwork/database/features/instant-client/index-097480.html，如图：一定下载红色标记的32-bit那个，点进去之后找到适合自己现有数据库版本的那个文件下载，我装的是oracle11.2.0.1，因此如图：右击迅雷下载...

运行下面的脚本，建立测试数据库和表。--CreateDataBasecreatedatabaseBulkTestDB;gouseBulkTestDB;go--CreateTableCreatetableBulkTestTable(Idintprimarykey,UserNamenvarchar(32),Pwdvarchar(16))go--CreateTableValuedCREATETYPEBulkUdtASTABLE(Idint,UserNamenvarchar(32),Pwdvarchar(16))ViewCode 使用最简单的Insert语句循环插入100万条数据。selectCOUNT(*)fromBulkTestTable;--deletefromBulkTestTable;DECLARE@idINT,@usernameNVARCHAR(32),@pwdvarchar(16)SET@id=1SET@username='kk'SET@pwd='123'WHILE@id<1000000--10000为你要执行插入的次数BEGININSERTINTOBulkTes...

代码1，php1<html>2<head>3<metahttp-equiv="Content-Type"content="text/html;charset=utf-8"/>4<!--------------------------------------------------------------5--省的字段是：province6--市的字段是：city7--县的字段是：area8--------------------------------------------------------------------------->9<mce:scripttype="text/javascript"><!--10/********11*定义创建XMLHttpRequest对象的方法12*13**************************************/14varxmlHttp;//声明变量15varrequestType="";//声明初始类型为空16functioncreateXMLHttpReq...

一.功能性测试     大数据功能主要涉及系统实现面向大数据分析应用的POSIXAPI，包括文件读取与访问控制，元数据操作，锁操作等功能；大数据分析系统的POSIX语义不同，实现的文件系统API也不同，功能测试要覆盖到大数据系统涉及实现的API和功能点；功能测试工作量大，应该重点考虑应用自动化测试方法进行，同时结合手动测试补充，自动化工具推荐ltp,fstest和locktests。   在多个节点上处理大数据的过程中，存在由于‘无用数据’和数据质量问题带来的各种问题。功能测试主要用以识别由于编码错误或节点配置错误带来的数据问题。 其包括以下几个阶段：        a.数据导入/预处理验证阶段根据具体的应用背景和业务需求，各种数据源如网络日志，物联网，社会网络及互联网文本和文件等被按需加载到HDFS中待处理。在这个过程可能会由于不正确或不复制，存储而导致的错误数据，对于这种情况，可采用以下方式...

问题背景：　　在测试&部署监控过程中，我们常常会遇到外部接口返回数据不靠谱的时候。最常见的场合是从某个http获取如json和xml等结构化的结果，进行解析并处理，在这时候出现以下这几种常见类型的错误：（1）整个结构不完整。直接无法解析json/xml。 （2）编码错误，常见的gbk/utf8错误  （3）超长数据/非法字符。 （4）数据类型不匹配。需要是数字的给了字符串，该是数组的给了字符串等，对json本身来说没问题，程序处理就会错误或者崩溃。（5）字段缺失或者为空，这个情况对json本身来说也是没问题的，处理进程固定要去取这里的字段就会出问题，或者进程本身没问题，但实际展现出问题。例如，json描述一个商品最近30天的售价，提供一个数组里有30个数据来画点，json里这个数组为空，从数据格式上来说没问题，但实际画点时展现即为空。 截图是来自一份合作方的数据，箭头指向的是上证指数曲线的点，如果点数据完全缺失（为空）则画曲线的界面会显示为空。在json结构上则仍然验证为合法。 解决问题的现状：　　对上述问题，我们有一...

 背景介绍：      搜狗手机输入法8.6版本近期发布了一个创新性的功能：Quickshare，用户通过输入法工具条的Quickshare按钮，可以进行百科、地名、音乐等等类别数据的搜索，搜索结果会直接以卡片形式在输入法中展示。Quickshare功能后台接入了不同数据源的接口，例如搜索地名时可以查询到相应地名的结果，这是由后端的搜狗地图服务器提供的数据源。  问题介绍：         但是该功能在后期测试验证时，出现了数据不一致的问题。例如：在搜狗地图的客户端程序中搜索"凯德Mall",可以查询到对应的结果；但是在Quickshare中搜索"凯德Mall"无结果。虽然接口都是搜狗地图服务器提供的，但是两个具体接口的数据内容不完全一致。为了进行数据覆盖度的评估验证，测试组完成了一套基于python的接口数据覆盖度自动化工具。 工具功能介绍该工具的主要功能是：定时地对线上服务器的接口进行自动化监控...

1）下载tcpdump工具tcpdump（dumpthetrafficonanetwork）是Linux中强大的网络数据采集分析工具之一，可以将网络中传送的数据包头完全截获下来提供分析。它支持针对网络层、协议、主机、网络或端口的过滤，并提供and、or、not等逻辑语句来帮助你去掉无用的信息。Android系统是基于Linux，可以使用tcpdump来抓取数据包。由于普通用户不能正常执行tcpdump，具备root权限的用户才可以直接执行它来获取网络上的信息，所以使用它的前提条件是：手机需要具备root权限。2）将下载好的tcpdump拷贝到手机adbpushD:/tcpdump/data/local（将下载到D盘的tcpdump工具拷贝到/data/local目录下）3）修改文件权限①通过命令修改文件权限adbshellchmod777/data/local(777代表目标文件或目录是任何人都可以读、写、执行)②通过RE文件管理器修改文件权限 4）使用tcpdump抓包/data/local/tcpdump-p-vv-s0-w/sdcard/mycapture.pcap（网...