#微信数据损坏

DTCC 2019 | 深度解码阿里数据库实现 数据库内核——基于HLC的分布式事务实现深度剖析

/摘要:分布式事务是分布式数据库最难攻克的技术之一,分布式事务为分布式数据库提供一致性数据访问的支持,保证全局读写原子性和隔离性,提供一体化分布式数据库的用户体验。本文主要分享分布式数据库中的时钟解决方案及分布式事务管理技术方案。混合逻辑时钟(HLC)可以实现本地获取,避免了中心时钟的性能瓶颈和单点故障,同时维护了跨实...

从 Apache ORC 到 Apache Calcite | 2019大数据技术公开课第一季《技术人生专访》

/摘要: 什么是ApacheORC开源项目?主流的开源列存格式ORC和Parquet有何区别?MaxCompute为什么选择ORC?如何一步步成为committer和加入PMC的?在阿里和Uber总部的工作体验有何异同?中美两种互联网公司的文化有什么差别?尽在本次直播。2019年5月,大数据计算技术公开课又开...

阿里云PolarDB发布重大更新 支持Oracle等数据库一键迁移上云

5月21日,阿里云PolarDB发布重大更新,提供传统数据库一键迁移上云能力,可以帮助企业将线下的MySQL、PostgreSQL和Oracle等数据库轻松上云,最快数小时内迁移完成。据估算,云上成本不到传统数据库的1/6。目前,已有约40万个数据库迁移到阿里云上。阿里云方面表示,该产品实现了两大技术突破:通过自研超低...

BigData NoSQL —— ApsaraDB HBase数据存储与分析平台概览

一、引言时间到了2019年,数据库也发展到了一个新的拐点,有三个明显的趋势:越来越多的数据库会做云原生(CloudNative),会不断利用新的硬件及云本身的优势打造CloudNative数据库,国内以阿里云的CloudHBase、POLARDB为代表,此块文章会有一定的引述,但不是本文的重点。NoSQL正在解决Big...

etcd 在超大规模数据场景下的性能优化

/作者|阿里云智能事业部高级开发工程师陈星宇(宇慕)etcd是一个开源的分布式的kv存储系统,最近刚被cncf列为沙箱孵化项目。etcd的应用场景很广,很多地方都用到了它,例如kubernetes就用它作为集群内部存储元信息的账本。本篇文章首先介绍我们优化的背景,为什么我们要进行优化,之后介绍etcd内部存储系统的工作...

【阿里云新品发布·周刊】第9期:实时大数据开发难、运维难、应用难?来,一站解决!

点击订阅新品发布会!新产品、新版本、新技术、新功能、价格调整,评论在下方,下期更新!关注更多内容,了解更多最新发布DataWorksStreamStudio重磅发布2019年5月15日15时,阿里云DataWorksStreamStudio:一站式流任务开发平台重磅发布,介绍实时计算任务开发的困难、问题和背景,引出使用...

阿里云DataWorks正式推出Stream Studio:为用户提供大数据实时计算的数据中台

5月15日阿里云DataWorks正式推出StreamStudio,正式为用户提供大数据的实时计算能力,同时标志着DataWorks成为离线、实时双计算领域的数据中台。据介绍,StreamStudio基于阿里巴巴Flink实时计算引擎,支持DAG和SQL双模式开发流计算作业,并支持DAG与SQL互转;支持Functio...

基于TableStore的海量气象格点数据解决方案实战

气象数据是一类典型的大数据,具有数据量大、时效性高、数据种类丰富等特点。气象数据中大量的数据是时空数据,记录了时间和空间范围内各个点的各个物理量的观测量或者模拟量,每天产生的数据量常在几十TB到上百TB的规模,且在爆发性增长。如何存储和高效的查询这些气象数据越来越成为一个难题。传统的方案常常采用关系型数据库加文件系统的...

药品监管系统架构揭秘:海量溯源数据存储与查询

在刚刚过去的2018年,“毒疫苗”事件再次触及了大众的敏感神经,因为十年前的“毒奶粉”事件还历历在目。我们急需创建一个全国性的药品(食品)监控追踪体系。与此同时,近年来随着国家对医药行业的大力支持,中国的医疗事业也出现了跨越式的发展,大量的新型药品上市,极大的丰富了患者和消费者的选择范围。大量的药品在市面上流通,产生了...

解决大数据难题 阿里云MaxCompute获科技大奖

/摘要: 据介绍,MaxCompute(大规模分布式的数据计算平台)是国内最早自研的大数据计算平台之一,主要应用于大规模数据处理场景。目前,这项源自浙江、解决世界级难题的成果已拥有EB(百京)级别的数据存储能力、百PB(千兆)级的单日计算能力。今日浙江省科学技术奖励大会正式召开,阿里云自研大数据计算平台Max...

阿里云POLARDB荣膺2019中国数据库年度最佳创新产品

在日前的DTCC2019(第十届中国数据库技术大会)上,阿里云自研云原生数据库POLARDB获选2019中国数据库——“年度最佳创新产品”。POLARDB是阿里云在2018年正式商业化的云原生数据库,采用存储计算分离、软硬一体化设计。通过高速的RDMA网络提供共享存储的架构,快速实现弹性缩扩容,单个实例可扩展到1000...

实时大数据开发难、运维难、应用难?来,一站解决!

点击订阅新品发布会!新产品、新版本、新技术、新功能、价格调整,评论在下方,下期更新!关注更多内容,了解更多最新发布DataWorksStreamStudio重磅发布2019年5月15日15时,阿里云DataWorksStreamStudio:一站式流任务开发平台重磅发布,介绍实时计算任务开发的困难、问题和背景,引出使用...

使用DataX同步MaxCompute数据到TableStore(原OTS)优化指南

概述现在越来越多的技术架构下会组合使用MaxCompute和TableStore,用MaxCompute作大数据分析,计算的结果会导出到TableStore提供在线访问。MaxCompute提供海量数据计算的能力,而TableStore提供海量数据高并发低延迟读写的能力。将 MaxCompute内数据导出至T...

阿里开发者招聘节 | 面试题14:如何实现两金额数据相加(最多小数点两位)

/摘要: 阿里巴巴资深技术专家们结合多年的工作、面试经验总结提炼而成的笔试真题这一次将陆续放出(面试题答案将在专辑分享结束后统一汇总分享)。并通过这些笔试真题开放阿里巴巴工作机会,让更多的开发者加入到阿里这个大平台。为帮助开发者们提升面试技能、有机会入职阿里,云栖社区特别制作了这个专辑——阿里巴巴资深技术专家...

阿里云智能数据构建与管理 Dataphin公测,助力企业数据中台建设

阿里云智能数据构建与管理 Dataphin (下简称“Dataphin”)近日重磅上线公共云,开启智能研发版本的公共云公测!在此之前,Dataphin以独立部署方式输出并服务线下客户,已助力多家大型客户高效自动化构建企业数据中台,不仅大幅度提升大数据研发效率,实现数据资产的标准化管理,更通过数据服务...
首页上一页...2425262728...下一页尾页