添加图片注释,不超过 140 字(可选)
大数据是一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合,而大数据作为企业运转的基础,只有经过提供数据采集、存储、计算、分析、调度、管理、治理等过程,才能为企业所用。
而海豚调度作为数据调度工具的先行者,深刻理解调度工具缺乏可视化、拓展性差、无法去中心化、稳定性差等痛点问题,能够针对行业工具痛点精准提供解决方案。
在整个大数据时代下,从互联网出行到乳业龙头企业,越来越多的企业随着业务发展而带来的数据急剧增长,数据使用效率低,管理难,面临传统的数据系统无法支撑解决问题。如果不从根本上解决数据的问题大数据领域未来仍将面临巨大的挑战。
在这个背景下,Apache DolphinScheduler社区8月份邀请Apache Kylin社区举办了一场联合Meetup,本次活动主题是【大数据底座的构建与展望,助力企业数字化转型】,我们也有幸邀请到了来自伊利、T3出行、白鲸开源、Apache Kylin社区等企业的资深大数据工程师与开发者,从数据分析引擎、数据调度、数字化转型、维护开源视角等话题探讨在两个开源项目的开发实践。
添加图片注释,不超过 140 字(可选)
无论你是热衷于钻研开源技术的开发者,还是“大数据调度+数据分析”的开源资深爱好者,都能这些前沿的案例从中获得全新的灵感。
无论你是 Apache DolphineScheduler & Apache Kylin的开发工程师还是个人爱好者,来到本次 Meetup,你一定能听到一手的分享,得到一手的收获!
报名通道
Apache DolphinScheduler & Apache Kylin 联合 Meetup | 8月线上直播报名通道已开启,赶快预约吧!
添加图片注释,不超过 140 字(可选)
10年大数据工作经验,涉及行业包括舆情,智慧城市,出行等
演讲题目:T3出行基于DolphinScheduler和Kylin自动构建指标模型的实践
演讲概要:简要介绍为什么要实现模型管理自动化;如何实现湖仓一体架构下的自动化模型管理设计;自动化模型管理的实现;团队的未来展望;
添加图片注释,不超过 140 字(可选)
负责内部大数据技术能力建设,推动大数据技术自研能力的落地以及内部的推广应用,承担大数据技术团队的组建与管理等
演讲题目:伊利集团在多云环境下基于Apache DolphinScheduler的探索与实践
演讲概要:应用多云的部署架构,让数据天然分散。在data mesh 和 data fabric 新型数据架构还未普及的情况下,集中式的数据架构仍需要大量的数据搬迁,在企业内部,落地一套适合企业内部情况的多云数据集成与一体化多云调度服务平台成为刚需。伊利集团基于 DolphinScheduler 调度平台积极探索实践,不断打磨产品细节,解决了多云数据集成与多云任务调度服务的问题,同时解锁了 DolphinScheduler 新玩法。
添加图片注释,不超过 140 字(可选)
Committer & PMC of Apache Kylin
演讲题目:更易用、更强劲的大数据分析平台-Kylin 5.0 社区路线一览
演讲概要:一方面优化 Kylin 的预计算引擎和模型元数据,大大提升模型设计的灵活性;另一方面积极拥抱最新的技术潮流,从 Native engine、微服务等角度重新设计和实现 Kylin 的计算引擎和部署架构。在这次分享中,将会给大家带来下一代 Kylin 技术的前瞻性介绍和使用演示。
添加图片注释,不超过 140 字(可选)
Apache DolphinScheudler PMC
演讲题目:Apache DolphinScheduler 社区维护者眼中的开源
演讲概要:你所不了解的开源, 以 Apache 顶级项目 DolphinScheduler 为例, 简述作为开源维护者的秘辛
Apache DolphinScheduler 是一个云原生并带有强大可视化界面的大数据工作流调度平台,致力于让调度变得更加容易,已在 1000+ 家公司的生产环境上稳定运行。身为一款专门针对于大数据平台的工作调度系统,具有本土化风格和多样化的部署方式。同时,Apache DolphinScheduler还拥有十分活跃的社区与定期的交流会。
Apache Kylin 是行业领先的开源分布式的分析型数据仓库,提供 Hadoop/Spark 之上的 SQL 查询接口及多维分析 (OLAP) 能力,支持对超大规模数据进行亚秒级查询,已被 eBay、腾讯、美团、滴滴、汽车之家、贝壳找房、OLX 集团等全球超过 1500 家企业采用。
福利环节
添加图片注释,不超过 140 字(可选)
添加图片注释,不超过 140 字(可选)
添加图片注释,不超过 140 字(可选)
添加图片注释,不超过 140 字(可选)
欢迎大家参与8月13日 Apache DolphineScheduler & Apache Kylin 联合的线上交流会,下午14:00,我们不见不散!
参与贡献
随着国内开源的迅猛崛起,Apache DolphinScheduler 社区迎来蓬勃发展,为了做更好用、易用的调度,真诚欢迎热爱开源的伙伴加入到开源社区中来,为中国开源崛起献上一份自己的力量,让本土开源走向全球。
参与 DolphinScheduler 社区有非常多的参与贡献的方式,包括:
添加图片注释,不超过 140 字(可选)
贡献第一个PR(文档、代码) 我们也希望是简单的,第一个PR用于熟悉提交的流程和社区协作以及感受社区的友好度。
社区汇总了以下适合新手的问题列表:https://github.com/apache/dolphinscheduler/issues/5689
非新手问题列表:https://github.com/apache/dolphinscheduler/issues?q=is%3Aopen+is%3Aissue+label%3A%22volunteer+wanted%22
如何参与贡献链接:https://dolphinscheduler.apache.org/zh-cn/community/development/contribute.html
来吧,DolphinScheduler开源社区需要您的参与,为中国开源崛起添砖加瓦吧,哪怕只是小小的一块瓦,汇聚起来的力量也是巨大的。
参与开源可以近距离与各路高手切磋,迅速提升自己的技能,如果您想参与贡献,我们有个贡献者种子孵化群,可以添加社区小助手微信(Leonard-ds) ,手把手教会您( 贡献者不分水平高低,有问必答,关键是有一颗愿意贡献的心 )。
- 如何通过免费开源ERP Odoo实现企业数字化转型深度分析(一)
本文来自<开源智造企业数字化转型报告白皮书>的精选内容章节.请勿转载.欢迎您反馈阅读意见. 引言 在由消费者驱动的数字经济时代,创新之势锐不可挡.变革步伐从未如此迅速,并且还会越来越快.对 ...
- Sentry 监控 - Discover 事件大数据查询分析引擎
系列 1 分钟快速使用 Docker 上手最新版 Sentry-CLI - 创建版本 快速使用 Docker 上手 Sentry-CLI - 30 秒上手 Source Maps Sentry For ...
- 分析师机构发布中国低代码平台现状分析报告,华为云AppCube为数字化转型加码
摘要:Forrester指出,中国企业数字化转型过程中,有58%的决策者正在采用低代码工具进行软件构建,另有16%的决策者计划采用低代码. 华为消息,知名研究与分析机构Forrester Resear ...
- 大数据时代变局与机遇,BI数字化转型的实战攻略!
党的十九大报告提出,要推动互联网.大数据.人工智能和实体经济深度融合.更加高效地获取.运用信息,成为企业具有强大竞争力的重要标志.我国企业应牢牢把握历史性机遇,以更加开放的姿态,积极拥抱新经济,积极参 ...
- 海豚调度5月Meetup:6个月重构大数据平台,帮你避开调度升级改造/集群迁移踩过的坑
当今许多企业都有着技术架构的DataOps程度不够.二次开发成本高.迁移成本高.集群部署混乱等情况,团队在技术选型之后发现并不适合自己的需求,但是迁移成本和难度又比较大,甚至前团队还留下了不少坑,企业 ...
- 倒计时0日!Apache DolphineScheduler4月 Meetup 大佬手把手教你大数据开发,离线调度
随着互联网技术和信息技术的发展,信息的数据化产生了许多无法用常规工具量化.处理和捕捉的数字信息.面对多元的数据类型,海量的信息价值,如何有效地对大数据进行挖掘分析,对大数据工作流进行调度,是保障企业大 ...
- Impala简介PB级大数据实时查询分析引擎
1.Impala简介 • Cloudera公司推出,提供对HDFS.Hbase数据的高性能.低延迟的交互式SQL查询功能. • 基于Hive使用内存计算,兼顾数据仓库.具有实时.批处理.多并发等优点 ...
- 大数据离线分析平台 JavaSDK数据收集引擎编写
JavaSDK设计规则 JavaSDK提供两个事件触发方法,分别为onChargeSuccess和onChargeRefund.我们在java sdk中通过一个单独的线程来发送线程数据,这样可以减少对 ...
- 第二篇:智能电网(Smart Grid)中的数据工程与大数据案例分析
前言 上篇文章中讲到,在智能电网的控制与管理侧中,数据的分析和挖掘.可视化等工作属于核心环节.除此之外,二次侧中需要对数据进行采集,数据共享平台的搭建显然也涉及到数据的管理.那么在智能电网领域中,数据 ...
随机推荐
- .NET MAUI 正式发布,再见了 Xamarin.Forms
David Ortinau 在dotnet 团队博客上发表了一篇文章<Introducing .NET MAUI – One Codebase, Many Platforms>,在这篇文章 ...
- 最大流&最小割&费用流模版
好久都没有搞博客了.想认真写又要准备文化课期末了. ISAP 流程: 原理就是dfs找增广路. 最基础的建反向边以便反悔就不说了. 但是记录一个dep(dis)表示层数,一开始BFS(从t开始,dis ...
- Wget命令解释
Wget主要用于下载文件,在安装软件时会经常用到,以下对wget做简单说明. 1.下载单个文件:wget http://www.baidu.com.命令会直接在当前目录下载一个index.html的文 ...
- Docker容器固定ip
Docker容器固定IP 必须停止docker服务才能创建网桥 查看docker服务状态 停止docker服务 启动docker服务 [root@docker Tools]# systemctl st ...
- BUUCTF-镜子里的世界
镜子里面的世界 16进制看了下没有东西,binwalk分离了一下也没发现其他的,使用stegsolve查看即可发现.
- SAP APO-主数据设置
可以在SAP APO的相关组件中创建主数据,也可以将其从SAP R / 3传输到SAP APO. 可以使用核心接口(CIF)将其传输到SAP APO模块. 在主数据集成模型中,您定义将主数据传输到SA ...
- SAP Word97 Intergration
*&---------------------------------------------------------------------* *& Report SAPRDEMOW ...
- Linux远程连接工具和运行级别
常用的Linux远程连接工具: xshell MobaXterm windows的命令行工具 Linux的运行级别 linux有七个运行级别 0----所有的服务都不开启,代表的式关机 1---代表的 ...
- Mybatis中@select注解联合查询
前言 在项目中经常会使用到一些简单的联合查询获取对应的数据信息,我们常规都是会根据对应的mapper接口写对应的mapper.xml的来通过对应的业务方法来调用获取,针对这一点本人感觉有点繁琐,就对@ ...
- Proxmox-VE虚拟环境