51
Dev开发社区
首页
文章
问答
工具
搜索
登录
注册
#分布式存储
手把手教你搭建一个基于Java的分布式爬虫系统
http://blog.51cto.com/xpleaf/2093952在不用爬虫框架的情况,经过多方学习,尝试实现了一个分布式爬虫系统,并且可以将数据保存到不同地方,类似MySQL、HBase等。基于面向接口的编码思想来开发,因此这个系统具有一定的扩展性,有兴趣的朋友直接看一下代码,就能理解其设计思想,虽...
代码星球
·
2020-04-12
手把手
教你
搭建
一个
基于
分布式应用概述一
1、概述 1.1 分布式应用可以在给定时间(同时)在网络中的多个系统上运行,通过协调它们以快速有效的方式完成特定任务; 通常来说,对于复杂而耗时的任务,非分布式应用(运行在单个系统中)需要几个小时才能完成,而分布式应用通过使用所有系统涉及的计算能力可以在几分钟内完成。 1.2 集群:分布式应用正在运行...
代码星球
·
2020-04-12
分布式
应用
概述
计算机系统存储器实验
存储器层次结构实验报告一.存储器山 1.实验要求和目的 实验要求:在自己的电脑上实验存储器山的实验,并绘制如同课本445页6-41图片的三维图。 实验目的:测试自己电脑CPU的性能,并绘制出存储...
代码星球
·
2020-04-12
计算机
系统
存储器
实验
二、查询语句存储
一、单表查询()select*fromwm_bl_batch_dtlwheretenant_num_id=?anddata_sign=?andcancelsign='N' [{"NAME":"TENANT_NUM_ID","TYPE":"NUMBER","PARAMSOURCE":"INPUT","MUSTHAVE"...
代码星球
·
2020-04-12
查询
语句
存储
WITH RECOMPILE和OPTION(RECOMPILE)区别仅仅是存储过程级重编译和SQL语句级重编译吗
在考虑重编译T-SQL(或者存储过程)的时候,有两种方式可以实现强制重编译(前提是忽略导致重编译的其他因素的情况下,比如重建索引,更新统计信息等等), 一是基于WITHRECOMPILE的存储过程级别重编译,另外一种是基于OPTION(RECOMPILE)的语句级重编译。 之前了解的比较浅,仅仅认为是前...
代码星球
·
2020-04-12
RECOMPILE
级重
编译
WITH
OPTION
各类存储器区别
存储器(Memory)是计算机系统中的记忆设备,用来存放程序和数据。计算机中全部信息,包括输入的原始数据、计算机程序、中间运行结果和最终运行结果都保存在存储器中。它根据控制器指定的位置存入和取出信息。有了存储器,计算机才有记忆功能,才能保证正常工作。按用途存储器可分为主存储器(内存)和辅助存储器(外存),也有分为外部存...
代码星球
·
2020-04-12
各类
存储器
区别
stored procedure --存储过程
存储过程(StoredProcedure),计算机用语,是一组为了完成特定功能的SQL语句集,是利用SQLServer所提供的Transact-SQL语言所编写的程序。经编译后存储在数据库中。存储过程是数据库中的一个重要对象,用户通过指定存储过程的名字并给出参数(如果该存储过程带有参数)来执行它。存储过程是由流控制...
代码星球
·
2020-04-12
stored
procedure
存储
过程
TokuDB存储引擎
TokuDB存储引擎TokuDB是一个高度可扩展,零维护的停机MySQL存储引擎,可提供基于索引的查询加速,改进的复制性能,无与伦比的压缩和实时架构修改。该TokuDB存储引擎是一个可扩展的,酸,MVCC兼容的存储引擎,提供基于索引的查询改进,可以在线修改架构,减少了从滞后两个硬盘驱动器和闪存。此存储引擎专为在写入密集...
代码星球
·
2020-04-12
TokuDB
存储
引擎
Python爬虫抓取东方财富网股票数据并实现MySQL数据库存储
Python爬虫可以说是好玩又好用了。现想利用Python爬取网页股票数据保存到本地csv数据文件中,同时想把股票数据保存到MySQL数据库中。需求有了,剩下的就是实现了。 在开始之前,保证已经安装好了MySQL并需要启动本地MySQL数据库服务。提到安装MySQL数据库,前两天在一台电脑上安装MySQL5....
代码星球
·
2020-04-11
Python
爬虫
抓取
东方财富
东方
存储单位的换算(KB, MB, GB)
关于存储单位的换算,大家一般会想到下面的换算方法。1GB=1024MB 1MB=1024KB 1kb=1024字节 但实际生活中,这种换算方法并不准确。例如在商家生产销售的硬盘,U盘中就不是这样换算的。商家眼中的换算方法是这样的:1GB=1000MB 1MB=1000...
代码星球
·
2020-04-11
存储
单位
换算
KB
MB
各种分布式文件系统的比较
1、MooseFS支持FUSE,相对比较轻量级,对master服务器有单点依赖,用perl编写,性能相对较差,国内用的人比较多,易用,稳定,对小文件很高效。+支持文件元信息+mfsmount很好用+编译依赖少,文档全,默认配置很好+mfshdd.cfg加*的条目会被转移到其它chunkserver,以便此chunkse...
代码星球
·
2020-04-11
各种
分布式
文件
系统
比较
使用VS2013、TFS2013和Git进行分布式团队协作
题记:呵呵,首先声明,题目起的有点大,其实我只想介绍下VS2013和TFS2013新加入的Git功能,也不是在VS中使用Git的详细向导(以后有空再详细分享给大家)。这篇文章虽然在写这篇文章《VisualStudio2013发布正式版及使用感受》的时候,心中就有此打算,后来有朋友回复说让我介绍一下Git的使用,更是让我...
代码星球
·
2020-04-11
使用
VS2013
TFS2013
Git
进行
漫谈计算机组成原理(五)高速缓冲存储器
老样子,在正式开始介绍“高速缓冲存储器”之前,我们先来了解一下其相关的信息。我相信,上面这张图你一定已经非常熟悉了,没错,这就是在本章绪论说的“存储器的层次结构”。上一讲我们介绍了存储层次结构中的L4,即主存。继续向上看,你会看到L3、L2、L1都是高速缓冲存储器。那么究竟什么是高速缓冲存储器呢?那就要从“速度”这个关...
代码星球
·
2020-04-11
漫谈
计算机
组成
原理
高速
存储单元
存储器被划分成若干个存储单元,每个存储单元从。开始顺序编号,例如一个存储器有128个存储单元,编号从0一127.如图所示。 那么一个存储单元能存储多少信息呢?电子计算机的最小信息单位是bit(音译为比特),也就是一个二进制位。8个bit组成一个即:,...
代码星球
·
2020-04-11
存储
单元
Android使用7牛云存储
第一次使用这个云存储,话说7牛云存储大有来头!区别于国内外其他云存储,七牛自行研发的全分布式架构解决了其他云存储单一数据中心架构可能存在的风险,同时首创双向加速特性对数据上传下载均加速,使得数据访问速度较传统方案平均提升50%以上。此外,镜像存储、客户端直传、断点续上传、云端富媒体处理等七牛云存储独有的功能也大大提升了...
代码星球
·
2020-04-11
Android
使用
牛云
存储
首页
上一页
...
59
60
61
62
63
...
下一页
尾页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他