51
Dev开发社区
首页
文章
问答
工具
搜索
登录
注册
#COMPUTE
阿里云MaxCompute 2019-8月刊
您好,MaxCompute 2019.8月刊为您带来8月产品、技术最新动态,欢迎阅读。导读【重要发布】8月产品重要发布【文档更新】8月重要文档更新推荐【干货精选】8月精选技术文章推荐【精彩活动技术干货】8月重要活动回顾及技术干货整理【重要发布】8月产品重要发布1.MaxCompute存储降价 查看详...
代码星球
·
2021-02-24
阿里
MaxCompute
2019-8月刊
MaxCompute问答整理之8月
本文是基于对MaxCompute产品的学习进度,再结合开发者社区里面的一些问题,进而整理成文。希望对大家有所帮助。问题一、通过数据源数据增量同步后,如何查看某一条数据具体被同步到MaxCompute中的时间?不支持,查看不了,可以看表元数据的LastModifiedTime时间,但具体某个记录看不到时间。问题二、开发的...
代码星球
·
2021-02-24
MaxCompute
问答
整理
8月
MaxCompute 最新特性介绍 | 2019大数据技术公开课第三季
摘要:距离上一次MaxCompute新功能的线上发布已经过去了大约一个季度的时间,而在这一段时间里,MaxCompute不断地在增加新的功能和特性,比如参数化视图、UDF支持动态参数、支持分区裁剪、生成建表DDL语句功能等功能都已经得到了广大开发者的广泛使用。那么,近期MaxCompute究竟还有哪些新特性呢?本文就为...
代码星球
·
2021-02-24
MaxCompute
最新
特性
介绍
2019
唱吧基于 MaxCompute 的大数据之路
使用MaxCompute之前,唱吧使用自建体系来存储处理各端收集来的日志数据,包括请求访问记录、埋点数据、服务器业务数据等。初期这套基于开源组件的体系有力支撑了数据统计、业务报表、风控等业务需求。但随着每天处理数据量的增长,积累的历史数据越来越多,来自其他部门同事的需求越来越复杂,自建体系逐渐暴露出了能力上的短板。同时...
代码星球
·
2021-02-24
唱吧
基于
MaxCompute
数据
之路
PAI-STUDIO通过Tensorflow处理MaxCompute表数据
PAI-STUDIO在支持OSS数据源的基础上,增加了对MaxCompute表的数据支持。用户可以直接使用PAI-STUDIO的Tensorflow组件读写MaxCompute数据,本教程将提供完整数据和代码供大家测试。为了方便用户快速上手,本文档将以训练iris数据集为例,介绍如何跑通实验。为了方便大家,我们提供了一...
代码星球
·
2021-02-24
PAI-STUDIO
通过
Tensorflow
处理
MaxCompute
利用InformationSchema与阿里云交易和账单管理API实现MaxCompute费用对账分摊统计
利用MaxComputeInformationSchema与阿里云交易和账单管理API实现MaxCompute费用对账分摊统计很多的企业用户选择MaxCompute按量付费模式构建自己的数据平台,利用MaxCompute按作业付费的计费模型,在获得高性能的同时避免"IDLE"状态的不必要资源费用支出,仅为实际使用付费。...
代码星球
·
2021-02-24
利用
InformationSchema
阿里
交易
账单
MaxCompute 费用暴涨之存储压缩率降低导致SQL输入量变大
现象:同样的SQL,每天处理的数据行数差不多,但是费用突然暴涨甚至会翻数倍。分析:我们先明确MaxComputeSQL后付费的计费公式:一条SQL执行的费用=扫描输入量️SQL复杂度️0.3(¥/GB)。变量主要是输入量和复杂度,如果SQL没有变更的情况下复杂度度也没有变化,那么费用上涨主要原因就是输入量增加,因此我们...
代码星球
·
2021-02-23
MaxCompute
费用
暴涨
存储
压缩率
Kafka数据迁移MaxCompute最佳实践
/摘要: 本文向您详细介绍如何使用DataWorks数据同步功能,将Kafka集群上的数据迁移到阿里云MaxCompute大数据计算服务。搭建Kafka集群进行数据迁移前,您需要保证自己的Kafka集群环境正常。本文使用阿里云EMR服务自动化搭建Kafka集群,详细过程请参见:Kafka快速入门。本文使用的E...
代码星球
·
2021-02-23
Kafka
数据
迁移
MaxCompute
最佳
MaxCompute 预付费标准版VS套餐版
MaxCompute于5月7日正式售卖预付费(包年包月)套餐资源,主打存储密集型套餐,一共三个套餐:存储密集型160套餐存储密集型320套餐存储密集型600套餐本文主要给大家介绍预付标准版和套餐版的资源、售价以及两者对比的情况,以供大家选购时进行参考。标准版购买后只包含计算资源,具体如下规格类型计算资源(CU)存储资源...
代码星球
·
2021-02-23
MaxCompute
预付费
标准版
VS
套餐
从 Spark 到 Kubernetes — MaxCompute 的云原生开源生态实践之路
2019年5月14日,喜提浙江省科学技术进步一等奖的 MaxCompute 是阿里巴巴自研的EB级大数据计算平台。该平台依托阿里云飞天基础架构,是阿里巴巴在10年前做飞天系统的三大件之分布式计算部分。10年后的今天,MaxCompute已经是可以承载EB级的数据存储能力,百PB级的单日计算能力,公共...
代码星球
·
2021-02-23
Spark
Kubernetes
MaxCompute
原生
开源
解决大数据难题 阿里云MaxCompute获科技大奖
/摘要: 据介绍,MaxCompute(大规模分布式的数据计算平台)是国内最早自研的大数据计算平台之一,主要应用于大规模数据处理场景。目前,这项源自浙江、解决世界级难题的成果已拥有EB(百京)级别的数据存储能力、百PB(千兆)级的单日计算能力。今日浙江省科学技术奖励大会正式召开,阿里云自研大数据计算平台Max...
代码星球
·
2021-02-23
解决
数据
难题
阿里
MaxCompute
使用DataX同步MaxCompute数据到TableStore(原OTS)优化指南
概述现在越来越多的技术架构下会组合使用MaxCompute和TableStore,用MaxCompute作大数据分析,计算的结果会导出到TableStore提供在线访问。MaxCompute提供海量数据计算的能力,而TableStore提供海量数据高并发低延迟读写的能力。将 MaxCompute内数据导出至T...
代码星球
·
2021-02-23
使用
DataX
同步
MaxCompute
数据
MaxCompute Studio使用心得系列7——作业对比
在数据开发过程中,我们通常需要将两个作业进行对比从而定位作业运行性能或者结果有差异的问题,但是对比作业时需要同时打开两个studio的tab页,或者两个Logview页,不停切换进行对比,使用起来非常的不方便。MaxComputeStudio从3.1.0版本开始支持作业对比,可以在一个页面同时比较两个作业,并且能自动标...
代码星球
·
2021-02-23
MaxCompute
Studio
使用
心得
系列
阿里云MaxCompute 2019-4月刊
/摘要: 4月新功能发布,精彩技术好文推荐,5月线上线下活动抢先知道,尽在4月刊。您好,MaxCompute 2019.4月刊为您带来产品最新动态和丰富的产品技术内容,欢迎阅读。导读【功能发布】4月产品新功能发布【文档更新】4月重要产品文档更新推荐【干货精选】4月精选技术文章推荐【活动预告】5月重要...
代码星球
·
2021-02-23
阿里
MaxCompute
2019-4月刊
组件 computed 与 vuex 中 getters 的使用,及 mapGetters 的使用,对象上追加属性,合并对象
vue是响应式的数据,这一点相当的方便我们的操作,但有些错误的操作方法会vue的响应无效 除此之外我们还要了解vue.set()和Object.assgin()的使用 vue.set() 向对象上追加属性 Object.assgin()合并对象的方法 接下来我们还是使用正确的示范吧: 组...
代码星球
·
2021-02-12
使用
对象
组件
computed
vuex
首页
上一页
...
2
3
4
5
6
...
下一页
尾页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他