/摘要：如何基于Flink搭建大规模准实时数据分析平台？在FlinkForwardAsia2019上，来自Lyft公司实时数据平台的徐赢博士和计算数据平台的高立博士分享了Lyft基于ApacheFlink的大规模准实时数据分析平台。查看FFA大会视频。本次分享主要分为四个方面：Lyft的流数据与场景准实时数据分析平台和...

在实际的数据平台运营管理过程中，数据表的规模往往随着更多业务数据的接入以及数据应用的建设而逐渐增长到非常大的规模，数据管理人员往往希望能够利用元数据的分析来更好地掌握不同数据表的血缘关系，从而分析出数据的上下游依赖关系。本文将介绍如何去根据MaxComputeInformationSchema中作业ID的输入输出表来分...

在实际的数据平台运营管理过程中，数据表的规模往往随着更多业务数据的接入以及数据应用的建设而逐渐增长到非常大的规模，数据管理人员往往希望能够利用元数据的分析来更好地掌握不同数据表的使用情况，从而优化数据模型。一个MaxCompute项目中经常使用的表简称为热门表，使用次数较少或者很长时间不使用的表简称为冷门表，本文将介绍...

阿里时序时空数据库TSDB最新推出TSQL，支持标准SQL的语法和函数。用户使用熟悉的SQL，不仅仅查询更简单易用，用户还可以利用SQL强大的功能，实现更加复杂的计算分析。2.1SQL拥有广泛用户基础SQL作为一个诞生于上世纪70年代的编程语言已经存在几十年了。这是一个相对而言较“古老”的编程语言，但又是一个有着广泛用...

说到“大数据”，当下这个词很火，各行各业涉及到数据的，目前都在提大数据，提数据仓库，数据挖掘或者机器学习，但同时另外一个热门的名词也很火，那就是“云”。越来越多的企业都在搭建属于自己的云平台，也有一些会选择使用技术比较成熟的云商业化产品服务，比如阿里云的分析型数据库产品。本文将结合我们自己企业内部正在使用的阿里云产品分...

7月31⽇，阿⾥云PB级实时数据仓库AnalyticDB重磅升级，推出AnalyticDBforMySQL3.0版。全新的AnalyticDB采⽤分布式云盘三副本机制，为企业客户提供99.9999999%的数据可靠性保证。此外，性能⼤幅度提升，基准测试写⼊性能提升50%，查询性能提升40%。实例存储空间可变，灵活控制C...

/摘要： 一家大型基因测序功能公司每日会产生10TB到100TB的下机数据，大数据生信分析平台需要达到PB级别的数据处理能力。这背后是生物科技和计算机科技的双向支撑：测序应用从科研逐步走向临床应用，计算模式从离线向在线演进，交付效率越来越重要。作者李鹏，原文首发于InfoQ，《容器混合云，Kubernetes...

通过DataWorks归档日志服务数据至MaxCompute官方指导文档：https://help.aliyun.com/document_detail/68322.html但是会遇到大家在分区上或者DataWorks调度参数配置问题，具体拿到真实的case模拟如下：创建数据源：步骤1、进入数据集成，点击作业数据源，进...

基于OSS的数据查询分析和可视化BI报表数据存储在OSS后，有多种查询分析的方法，包括阿里云MaxCompute、DataLakeAnalytics产品等Severless查询分析服务，也可以自建Spark、Presto、Imapla应用来分析OSS上的数据。本文，介绍基于OSS+DataLakeAnalytics+Q...

/摘要： Ingress主要提供HTTP层（7层）路由功能，是目前K8s中HTTP/HTTPS服务的主流暴露方式。为简化广大用户对于Ingress日志分析与监控的门槛，阿里云容器服务和日志服务将Ingress日志打通，只需要应用一个yaml资源即可完成日志采集、分析、可视化等一整套Ingress日志方案的部署...

0.DataLakeAnalytics（DLA）简介关于DataLake的概念，更多阅读可以参考：https://en.wikipedia.org/wiki/Data_lake以及AWS和Azure关于DataLake的解读：https://amazonaws-china.com/big-data/datalakes-...

我叫洞幺，是一名大型婚恋网站“我在这等你”的资深老员工，虽然在公司五六年，还在一线搬砖。“我在这等你”成立15年，目前积累注册用户高达2亿多，在我们网站成功牵手的用户达2千多万。目前我们的公司在CEO的英名带领下，为我国民生问题出点绵薄之力。缘起突然有一天，我主管说公司最近购买了阿里云的QuickBI专业版。说了一大堆...

Fiddler是最强大最好用的Web调试工具之一，它能记录所有客户端和服务器的http和https请求，允许你监视，设置断点，甚至修改输入输出数据.使用Fiddler无论对开发还是测试来说，都有很大的帮助。阅读目录Fiddler的基本介绍Fiddler的工作原理同类的其它工具Fiddler如何捕获Firefox的会话F...

机器：一台linux虚机，内存1G，操作系统CentOSrelease5.6，硬盘100G。实验应用：乐学方舟后台部署（非正式环境）应用环境：apache-tomcat-7.0.27 ，JDK1、下载hudson，安装部署http://hudson-ci.org/点击下载2、下载完成，需找一台linux的机器...

转自http://www.xifenfei.com/2016/11/plsql-dev-hacker-bitcoin.htmlafterconnect.sql是plsqldev登录后自动执行脚本，非Oralce官方脚本数据库启动后执行触发器DBMS_SUPPORT_INTERNALDBMS_SUPPORT_INTERN...