众所周知Flink是当前广泛使用的计算引擎，Flink使用checkpoint机制进行容错处理[1]，Flink的checkpoint会将状态快照备份到分布式存储系统，供后续恢复使用。在Alibaba内部我们使用的存储主要是HDFS，当同一个集群的Job到达一定数量后，会对HDFS造成非常大的压力，本文将介绍一种大幅度...

函数计算（FunctionCompute）：函数计算 是事件驱动的全托管计算服务。使用函数计算，您无需采购与管理服务器等基础设施，只需编写并上传代码。函数计算为您准备好计算资源，弹性地可靠地运行任务，并提供日志查询、性能监控和报警等功能。借助函数计算，您可以快速构建任何类型的应用和服务，并且只需为任务实际消耗...

1、背景介绍同一个主账号下面的两个工作空间，工作空间名称分别为A工作空间名称:wei_wwwwA工作空间子账号：mc_ossB工作空间名称:wei_mcB工作空间子账号：bigdata_wei现在B工作空间子账号bigdata_wei需要访问A工作空间子账号mc_oss创建的UDF函数。执行查询语句报错信息如下：2、M...

“这里描述我们实际服务部署的时候频繁发生的两个常用场景。第一个场景，我们“办公网环境”想要在“准生产环境”下部署，需要做如下工作：打包、将文件上传到堡垒机上、scp将上传好的包裹传输到“准生产环境”的目标机器、ssh目标机器、restart重启服务。第二个场景是，我们可能随时的给“准生产环境”临时上传一些文件，但是仍然...

笔者线上有一个Flink任务消费Kafka数据，将数据转换后，在Flink的Sink算子内部调用第三方api将数据上报到第三方的数据分析平台。这里使用批量同步api，即：每50条数据请求一次第三方接口，可以通过批量api来提高请求效率。由于调用的外网接口，所以每次调用api比较耗时。假如批次大小为50，且请求接口的平均...

从编程开发的角度来说，ApacheDubbo（以下简称Dubbo）首先是一款RPC服务框架，它最大的优势在于提供了面向接口代理的服务编程模型，对开发者屏蔽了底层的远程通信细节。同时Dubbo也是一款服务治理框架，它为分布式部署的微服务提供了服务发现、流量调度等服务治理解决方案。在这篇文章中，我们将以以上基础能力为背景，...

直播回顾：点击这里微服务架构下，稳定性和高可用性一个永恒的话题，在实际的治理过程中，我们有可能会遇到以下场景：某个应用灰度发布，先上了几台机器，由于代码逻辑写的有问题，造成线程池满，出现运行异常。服务端集群中，某几台机器由于磁盘满，或者是宿主机资源争抢导致load过高，客户端出现调用超时。服务端集群中，某几台机器由于线...

HTTPS时代已经来临，而新一代安全传输协议TLS1.3的普及会大大提升HTTP连接速度的性能，消除HTTPS使用性能上的担忧，助推HTTPS进一步应用落地。早在去年，阿里云CDNHTTPS就已经全面支持TLS1.3，鼓励用户逐步升级到更安全、性能更佳的TLS1.3，帮助终端获得更好的访问体验。本文由阿里云CDN技术专...

中国有句古话：“民以食为天”，人们对饮食的看重始终贯穿于中国文明发展的历史长河。但近年来，食品安全事件频发，餐饮业“后厨重地”合规性问题逐渐走上公众舆论的焦点，成为政府重点监管的所在。那么，面对“食品安全大过天”这一社会诉求，云计算、大数据、人工智能技术又能发挥怎样的作用呢？从2015年起，国家食品药品监督管理局提出的...

Lindorm，就是云操作系统飞天中面向大数据存储处理的重要组成部分。Lindorm是基于HBase研发的、面向大数据领域的分布式NoSQL数据库，集大规模、高吞吐、快速灵活、实时混合能力于一身，面向海量数据场景提供世界领先的高性能、可跨域、多一致、多模型的混合存储处理能力。目前，Lindorm已经全面服务于阿里经济体...

过去无论您是在生产中使用，还是调研ApacheFlink，估计您总是会问这样一个问题：我该如何访问和更新Flink保存点（savepoint）中保存的state？不用再询问了，ApacheFlink1.9.0引入了状态处理器（StateProcessor）API，它是基于DataSetAPI的强大扩展，允许读取，写入和...

无论在OLAP还是OLTP领域，Join都是业务常会涉及到且优化规则比较复杂的SQL语句。对于离线计算而言，经过数据库领域多年的积累，Join语义以及实现已经十分成熟，然而对于近年来刚兴起的StreamingSQL来说Join却处于刚起步的状态。其中最为关键的问题在于Join的实现依赖于缓存整个数据集，而Streami...

近期，朋友圈刷屏的2017和2019对比图，扎了许多人的心，相信创投圈人士更是体会尤深。2018年的创业“寒冬”，一直延续到了2019年。ofo的戴威、锤子的老罗相继倒下，国民老公王思聪的熊猫TV倒闭，P2P金融全面清退，互联网VC投融资断崖式下跌……“创业就是不知疲倦地翻越每一个山丘”，在环境变化和商业竞争中，有人跌...

/导读：对于云上客户而言，其云上数据被妥善的安全保护是其最重要的安全需求，也是云上综合安全能力最具象的体现。本文作者将从云安全体系出发，到云数据安全，再到云原生安全体系对全链路加密进行一次梳理，从而回答：在云原生时代，全链路加密需要做什么？如何做到？以及未来要做什么？数据安全在云上的要求，可以用信息安全基本三要素"CI...

 这是一个生意繁忙的周末。你坐在20平米的餐饮店收银台，习惯性地打开阿里云小程序。这时，你的管理后台收到一条条订单信息，可能来自你的店内，也可能来自数十公里外。你“聘用”的1号员工：阿里云小程序，一端后台，控制着支付宝、微信、百度、淘宝、钉钉、高德等多端流量入口。你想到过去：流量少、推广贵、效果差；进驻外卖平...