51
Dev开发社区
首页
文章
问答
工具
搜索
登录
注册
#ARK
spark机器学习从0到1介绍入门之(一)
一、什么是机器学习机器学习(MachineLearning,ML)是一门多领域交叉学科,涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。专门研究计算机怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能。它是人工智能的核心,是使计算机具有智能的根本途...
代码星球
·
2020-09-05
spark
机器
学习
介绍
入门
sparkcore入门到实战之(4)Spark_Transformation和Action算子
一、Transformation 1.1map 1.2filter &n...
代码星球
·
2020-09-05
sparkcore
入门
实战
Spark
Transformation
sparkcore入门到实战之(3)弹性式数据集RDD
一、RDD简介二、创建RDD 2.1由现有集合创建 2.2引用外部存储系统中的数据集  ...
代码星球
·
2020-09-05
sparkcore
入门
实战
弹性
数据
SparkStreaming入门到实战之(5)--Spark_Streaming整合Kafka
一、版本说明二、项目依赖三、整合Kafka 3.1ConsumerRecord 3.2生产者属性  ...
代码星球
·
2020-09-05
SparkStreaming
入门
实战
--Spark
Streaming
SparkStreaming入门到实战之(4)--Spark Streaming 整合 Flume
一、简介二、推送式方法 2.1配置日志收集Flume 2.2项目依赖 &...
代码星球
·
2020-09-05
SparkStreaming
入门
实战
--Spark
Streaming
SparkStreaming入门到实战之(3)--Spark Streaming与流处理
一、流处理 1.1静态数据处理 1.2流处理二、SparkStreaming &nb...
代码星球
·
2020-09-05
SparkStreaming
入门
实战
--Spark
Streaming
SparkStreaming入门到实战之(2)--Spark Streaming 基本操作
一、案例引入 3.1StreamingContext 3.2数据源 &n...
代码星球
·
2020-09-05
SparkStreaming
入门
实战
--Spark
Streaming
sparkcore入门到实战之(14)HBase 中加盐(Salting)之后的表如何读取
我们知道,HBase 为我们提供了hbase-mapreduce工程包含了读取 HBase 表的 InputFormat、OutputFormat 等类。这个工程的描述如下:ThismodulecontainsimplementationsofInputFormat,O...
代码星球
·
2020-09-05
sparkcore
入门
实战
HBase
加盐
Spark SQL入门到实战之(5)使用 Spark SQL 高效地读写 HBase
Apache Spark 和Apache HBase 是两个使用比较广泛的大数据组件。很多场景需要使用 Spark 分析/查询 HBase 中的数据,而目前Spark内置是支持很多数据源的,其中就包括了HBase,但是内置的读取数据源还是使...
代码星球
·
2020-09-05
Spark
SQL
入门
实战
使用
sparkcore入门到实战之(13)在Spark上通过BulkLoad快速将海量数据导入到Hbase
本文将介绍如何在Spark上使用Scala编写快速导入数据到Hbase中的方法。这里将介绍两种方式:第一种使用Put普通的方法来倒数;第二种使用BulkLoadAPI。 使用 org.apache.hadoop.hbase.client.Put 将数据一条一条写入Hbase中,...
代码星球
·
2020-09-05
sparkcore
入门
实战
Spark
通过
sparkcore入门到实战之(12)Spark读取Hbase中的数据
大家可能都知道很熟悉Spark的两种常见的数据读取方式(存放到RDD中):(1)、调用parallelize函数直接从集合中获取数据,并存入RDD中;Java版本如下:JavaRDD<Integer>myRDD=sc.parallelize(Arrays.asList(1,2,3));Scala版本如下:v...
代码星球
·
2020-09-05
sparkcore
入门
实战
Spark
读取
(知道因为下载数据库错误,而导致解压失败,但是找不到下载到哪里了呀!原来在这里)EOFError: Compressed file ended before the end-of-stream marker was reached
把下载好的数据放在这里就行了 背景:运行LeNet识别CIFAR-10的图像的代码时,报错: EOFError:Compressedfileendedbeforetheend-of-streammarke...
代码星球
·
2020-09-02
下载
知道
因为
数据库
错误
10 使用 OpenCV、Kafka 和 Spark 技术进行视频流分析
问题引起 基于分布式计算框架Spark的室内防盗预警系统首先用摄像头录一段视频,存在电脑里,下载一个ffmpeg的软件对视频进行处理,处理成一张张图片,然后通过hadoop里边的一个文件系统叫做hdfs进行储存,之后进行分析。用spark将hdfs中存储的图片进行读取,调用opencv的人形识别算法将图片中有...
代码星球
·
2020-08-30
使用
OpenCV
Kafka
Spark
技术
树莓派项目(1-3 )目标识别 NNPACK支持版Darknet,可用于树莓派等嵌入设备
https://github.com/digitalbrain79/darknet-nnpack https://github.com/AlexeyAB/darknet#how-to-train-to-detect-your-custom-objects https://ww...
代码星球
·
2020-08-30
树莓
项目
目标
识别
NNPACK
HTML:Hyper Text Markup Language 超文本标记语言
1.HTML是什么?*HyperTextMarkupLanguage超文本标记语言*HyperText:超链接.把不同空间的资源,整合在一起,形成逻辑上的网状结构.*MarkupLanguage标签语言.该语言是由标签构成.*HTML文档=网页*浏览器解析HTML2.怎样创建一个HTML文档.*后缀名:.html.ht...
代码星球
·
2020-08-29
HTML
Hyper
Text
Markup
Language
首页
上一页
...
14
15
16
17
18
...
下一页
尾页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他