51
Dev开发社区
首页
文章
问答
工具
搜索
登录
注册
#基于
基于MaxCompute InformationSchema进行冷门表热门表访问分析
在实际的数据平台运营管理过程中,数据表的规模往往随着更多业务数据的接入以及数据应用的建设而逐渐增长到非常大的规模,数据管理人员往往希望能够利用元数据的分析来更好地掌握不同数据表的使用情况,从而优化数据模型。一个MaxCompute项目中经常使用的表简称为热门表,使用次数较少或者很长时间不使用的表简称为冷门表,本文将介绍...
代码星球
·
2021-02-24
基于
MaxCompute
InformationSchema
进行
冷门
DLedger —基于 raft 协议的 commitlog 存储库
“点击获取上云帮助文档”尊敬的阿里云用户:您好!为方便您试用开源RocketMQ客户端访问阿里云MQ,我们申请了专门的优惠券,优惠券可以直接抵扣金额。请填写下您公司账号信息,点击上图,了解更多哦。一、DLedger引入目的在RocketMQ4.5版本之前,RocketMQ只有Master/Slave一种部署方式,一组b...
代码星球
·
2021-02-24
DLedger
基于
raft
协议
commitlog
传统保险企业基于 Dubbo 的微服务实践
本文整理自中国人寿保险(海外)股份有限公司深圳中心技术总监家黄晓彬在Dubbo社区开发者日深圳站的现场分享。中国人寿保险(海外)股份有限公司负责香港、澳门、新加坡和印尼的业务开发,和国内业务不同的是,海外业务面临不同的法规、语言、币种等难题,技术上对业务的支持会存在一些挑战。通过本文,您将了解中国人寿保险在这方面的处理...
代码星球
·
2021-02-24
传统
保险
企业
基于
Dubbo
悠星网络基于阿里云分析型数据库PostgreSQL版的数据实践
说到“大数据”,当下这个词很火,各行各业涉及到数据的,目前都在提大数据,提数据仓库,数据挖掘或者机器学习,但同时另外一个热门的名词也很火,那就是“云”。越来越多的企业都在搭建属于自己的云平台,也有一些会选择使用技术比较成熟的云商业化产品服务,比如阿里云的分析型数据库产品。本文将结合我们自己企业内部正在使用的阿里云产品分...
代码星球
·
2021-02-24
悠星
网络
基于
阿里
分析型
多云混合云之多集群统一管理:基于阿里云ACK统一纳管多个不同Kubernetes集群
目前阿里云云原生产品家族已经支持多集群管理功能,允许使用阿里云容器服务Kubernetes(简称ACK)控制台或kubectl命令接入、统一纳管其他公有云、客户IDC自建K8s集群,集中管理部署K8s工作负载;并可以针对工作负载流量统一管理,支持服务就近访问、故障转移能力。本文重点介绍如何使用ACK控制台来接入一个外部...
代码星球
·
2021-02-24
集群
统一
多云
混合
之多
基于MaxCompute的数仓数据质量管理
声明本文中介绍的非功能性规范均为建议性规范,产品功能无强制,仅供指导。参考文献《大数据之路——阿里巴巴大数据实践》——阿里巴巴数据技术及产品部著。背景及目的数据对一个企业来说已经是一项重要的资产,既然是资产,肯定需要管理。随着业务的增加,数据的应用越来越多,企业在创建的数仓过程中对数据的管理也提出了更高的要求,而数据质...
代码星球
·
2021-02-24
基于
MaxCompute
数仓
数据
质量管理
基于OSS+DataLakeAnalytics+QuickBI的Serverless的查询分析和可视化BI
基于OSS的数据查询分析和可视化BI报表数据存储在OSS后,有多种查询分析的方法,包括阿里云MaxCompute、DataLakeAnalytics产品等Severless查询分析服务,也可以自建Spark、Presto、Imapla应用来分析OSS上的数据。本文,介绍基于OSS+DataLakeAnalytics+Q...
代码星球
·
2021-02-24
基于
OSS+DataLakeAnalytics+QuickBI
Serverless
查询
分析
信用算力基于 RocketMQ 实现金融级数据服务的实践
导读:微服务架构已成为了互联网的热门话题之一,而这也是互联网技术发展的必然阶段。然而,微服务概念的提出者MartinFowler却强调:分布式调用的第一原则就是不要分布式。纵观微服务实施过程中的弊端,可以推断出作者的意图,就是希望系统架构者能够谨慎地对待分布式调用,这是分布式系统自身存在的缺陷所致。但无论是RPC框架,...
代码星球
·
2021-02-24
信用
算力
基于
RocketMQ
实现
基于 DataLakeAnalytics 的数据湖实践
随着软硬件各方面条件的成熟,数据湖(DataLake)已经越来越受到各大企业的青睐,与传统的数仓实践不一样的是,数据湖不需要专门的“入仓”的过程,数据在哪里,我们就从哪里读取数据进行分析。这样的好处在于:一来数据可以保存在很便宜的存储上面(比如阿里云的OSS 上面),给企业节省预算,而需要分析的时候又可以分析...
代码星球
·
2021-02-24
基于
DataLakeAnalytics
数据湖
实践
Knative 实战:基于 Knative Serverless 技术实现天气服务-下篇
上一期我们介绍了如何基于KnativeServerless技术实现天气服务-上篇,首先我们先来回顾一下上篇介绍的内容:通过高德天气API接口,每隔3个小时定时发送定时事件,将国内城市未来3天的天气信息,存储更新到表格存储提供RESTfulAPI查询天气信息接下来我们介绍如何通过表格存储提供的通道服务,实现Knative...
代码星球
·
2021-02-24
Knative
实战
基于
Serverless
技术
基于 RocketMQ 的同城双活架构在美菜网的挑战与实践
本文整理自李样兵在北京站RocketMQmeetup分享美菜网使用RocketMQ过程中的一些心得和经验,偏重于实践。嘉宾李样兵,现就职于美菜网基础服务平台组,负责MQ,配置中心和任务调度等基础组件开发工作。今天主要从三个方面进行分享:美菜网消息队列的历史基于RocketMQ我们做了那些事情同城双活的选型和思考美菜网历...
代码星球
·
2021-02-24
基于
RocketMQ
同城
双活
架构
基于 APIGateway 打造生产级别的 Knative 服务
/导读:在实际应用中,通过APIGateway(即API网关),可以为内部服务提供保护、提供统一的鉴权管理、限流、监控等能力,开发人员只需要关注内部服务的业务逻辑即可。作者元毅在本文中将会为大家介绍:如何通过阿里云API网关以及内网SLB,将Knative服务对外发布,以打造生产级别的Knative服务。阿里云API网...
代码星球
·
2021-02-24
基于
APIGateway
打造
生产
别的
基于宜搭的《T恤尺码收集》应用搭建
/简介: 在阿里,T恤是程序员必不可少的元素。每逢公司或者BU(部门)的重大节庆日,比如双11、年会、新BU成立仪式、大型活动等,都会给员工定制发放统一的T恤或者POLO衫服装。而我们每次发放T恤之前,有一步必不可少的就是收集员工的T恤尺码。宜搭:人人搭建、人人使用。应用搭建,从未如此简单。宜搭平台的命名取适...
代码星球
·
2021-02-24
基于
宜搭
T恤尺码收集
应用
搭建
唱吧基于 MaxCompute 的大数据之路
使用MaxCompute之前,唱吧使用自建体系来存储处理各端收集来的日志数据,包括请求访问记录、埋点数据、服务器业务数据等。初期这套基于开源组件的体系有力支撑了数据统计、业务报表、风控等业务需求。但随着每天处理数据量的增长,积累的历史数据越来越多,来自其他部门同事的需求越来越复杂,自建体系逐渐暴露出了能力上的短板。同时...
代码星球
·
2021-02-24
唱吧
基于
MaxCompute
数据
之路
基于 K8s 做应用发布的工具那么多, 阿里为啥选择灰姑娘般的 Tekton ?
/导读:近年来,越来越多专门给Kubernetes做应用发布的工具开始缤纷呈现,帮助大家管理和发布不断增多的Kubernetes应用。在做技术选型的时候,我们需要给业务选择一个最好的工具、最稳的底座。那么又该如何比较和衡量这些工具呢?本篇文章中阿里云技术专家邓洪超将会和大家分享自己独特的体验,帮助读者初步了解Tekto...
代码星球
·
2021-02-24
基于
K8s
应用
发布
工具
首页
上一页
1
2
3
4
5
...
下一页
尾页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他