技术干货｜阿里云基于Hudi构建Lakehouse实践探索「内附干货PPT下载渠道」

【技术干货｜阿里云基于Hudi构建Lakehouse实践探索「内附干货PPT下载渠道」】的更多相关文章

阿里云基于OSS的云上统一数据保护方案2.0技术解析

近年来,随着越来越多的企业从传统经济向数字经济转型,云已经渐渐成为数据经济IT新常态.核心业务系统上云,云上的业务创新,这些都产生了大量的业务数据,这些数据也成为了企业最重要的资产.资源. 阿里云基于OSS的云上统一数据保护方案2.0,针对业务上云后数据保护所面临的挑战,提供多层次.全方位的数据保护解决方案,让您业务上云,数据无忧. 阿里云基于OSS的云上统一数据保护方案2.0,能够应对数据在使用.存储的过程中遇到的风险,通过其云原生的基础能力,为企业提供了多元化.多维度的数据保护解决方案. 业…

阿里云智能数据构建与管理 Dataphin公测，助力企业数据中台建设

阿里云智能数据构建与管理 Dataphin (下简称“Dataphin”)近日重磅上线公共云,开启智能研发版本的公共云公测!在此之前,Dataphin以独立部署方式输出并服务线下客户,已助力多家大型客户高效自动化构建企业数据中台,不仅大幅度提升大数据研发效率,实现数据资产的标准化管理,更通过数据服务体系让数据智能驱动业务.经过半年时间准备,Dataphin已于2019年4月23日正式登陆阿里云公共云,以满足更广泛的客户需求.下图为Dataphin在企业数据中台的定位: Dataphin,亦称智能…

阿里云基于OSS的云上统一数据保护方案2.0正式发布

近年来,随着越来越多的企业从传统经济向数字经济转型,云已经渐渐成为数据经济IT新常态.核心业务系统上云,云上的业务创新,这些都产生了大量的业务数据,这些数据也成为了企业最重要的资产.资源.阿里云基于OSS的云上统一数据保护方案2.0,针对业务上云后数据保护所面临的挑战,提供多层次.全方位的数据保护解决方案,让您业务上云,数据无忧.阿里云基于OSS的云上统一数据保护方案2.0,能够应对数据在使用.存储的过程中遇到的风险,通过其云原生的基础能力,为企业提供了多元化.多维度的数据保护解决方案. 业界领…

即插即用，基于阿里云Ganos快速构建云上开源GIS方案

对于轻量级GIS应用,选择具备时空能力的云上数据库再搭配开源GIS软件,能够快速构建稳定.廉价.实用的GIS解决方案.Ganos是阿里云自研时空基础设施(PaaS层)的核心引擎,该引擎整合了云上异构计算并行加速.OSS大规模存储等基础设施能力,上层与RDS PostgresSQL数据库.POLARDB for PG/Oracle云原生数据库.HBase大数据等融合,为云计算基础产品提供了免费但专业级的时空数据存储.查询与分析计算能力.本文主要介绍如何将Ganos作为数据源与GeoServer.u…

使用Apache Pulsar + Hudi构建Lakehouse方案了解下？

1. 动机 Lakehouse最早由Databricks公司提出,其可作为低成本.直接访问云存储并提供传统DBMS管系统性能和ACID事务.版本.审计.索引.缓存.查询优化的数据管理系统,Lakehouse结合数据湖和数据仓库的优点:包括数据湖的低成本存储和开放数据格式访问,数据仓库强大的管理和优化能力.Delta Lake,Apache Hudi和Apache Iceberg是三种构建Lakehouse的技术. 与此同时,Pulsar提供了一系列特性:包括分层存储.流式卸载.列式卸载等,让其成…

Halodoc使用 Apache Hudi 构建 Lakehouse的关键经验

Halodoc 数据工程已经从传统的数据平台 1.0 发展到使用 LakeHouse 架构的现代数据平台 2.0 的改造.在我们之前的博客中,我们提到了我们如何在 Halodoc 实施 Lakehouse 架构来服务于大规模的分析工作负载. 我们提到了平台 2.0 构建过程中的设计注意事项.最佳实践和学习. 本博客中我们将详细介绍 Apache Hudi 以及它如何帮助我们构建事务数据湖.我们还将重点介绍在构建Lakehouse时面临的一些挑战,以及我们如何使用 Apache Hudi 克服这些…