2018年10月份,DB-Engines 发布了月全球数据库排名,排名前三的一如既往还是Oracle.MySQL.Microsoft SQL Server.排名是重要指标,同时增长率的重要性也同样备受重视. MariaDB以黑马之势,强势席卷DB-Engines榜单在DB-Engines跟踪分析的343个数据库中,MariaDB现在总体排名第14,领先于很多知名的且创始时间比它还长的数据库,比如Hive.HBASE.SAP HANA等.尽管MySQL的人气趋于平缓.甚至下降,但是MariaDB却…
 Android RecyclerView单击.长按事件:基于OnItemTouchListener +GestureDetector标准实现(二),封装抽取成通用工具类 我写的附录文章2,介绍了Android如何基于OnItemTouchListener +GestureDetector实现单击.长按事件的监听,由于如今RecyclerView在Android开发是如此的普遍,以及RecyclerView的单击事件是如此的常用,如果像附录文章2那样把一堆事件监听写到业务逻辑代码里面,那得写…
11月26日,开源数据库厂商MongoDB与阿里云在北京达成战略合作,作为合作的第一步,最新版MongoDB 4.2数据库产品正式上线阿里云平台. 目前阿里云成为全球唯一可提供最新版MongoDB服务的云厂商,双方合作打通了企业在云上使用最新版开源数据库的通道. 精彩回放 错过直播没关系,戳下方看回放:https://developer.aliyun.com/live/1705 MongoDB是全球排名第一的NoSQL数据库,也是业界最受欢迎的开源数据库之一.中国是MongoDB下载次数最多的市…
摘自Apache Flink官网 最早的streaming 架构是storm的lambda架构 分为三个layer batch layer serving layer speed layer 一.在streaming中Flink支持的通知时间 Flink官网写了个了解streaming和各种时间的博客 https://www.oreilly.com/ideas/the-world-beyond-batch-streaming-101#F2 1.Processing time:执行时候的机器系统时…
前言 本文主要是想简要说明Flink在集群部署.任务提交.任务运行过程中资源情况,若表述有误欢迎大伙留言分享,非常感谢! 一.集群部署阶段 集群部署这里指的是Flink standalone模式,因为在Yarn模式(包括session.single job模式也成Per-job模式)是可以仅通过Flink client提交任务到Yarn上,所以是否手动部署Flink集群对任务的执行是没有影响的.下图[1]是简单的Flink的集群构成情况,包括一个master(JobManager).两个work…
记者:我们不得不要说到你和雅虎之间的事情了.你知道,雅虎对整个互联网业的意义不只是一家公司,它有它象征的意义,重要的是,雅虎对阿里巴巴的意义更加非同寻常,当你最后决定用76亿美元从雅虎“赎身”的时候,你曾经有过什么样的思考?   马云:人们把很多问题看的太个人化了,太纠结了.我和雅虎又没有什么大关系,对我来说,雅虎是互联网时代的标志性公司,我们都很喜欢这家公司.阿里巴巴和雅虎,在一个很偶然的也很有意思的时期,我们碰上了,合作了,到一定程度的时候,我们又发现我们必须分开才能更好,所以就又分开了.这…
1.基本组件栈 了解Spark的朋友会发现Flink的架构和Spark是非常类似的,在整个软件架构体系中,同样遵循着分层的架构设计理念,在降低系统耦合度的同时,也为上层用户构建Flink应用提供了丰富且友好的接口. Flink分为架构分为三层,由上往下依次是API&Libraries层.Runtime核心层以及物理部署层 ​ API&Libraries层 作为分布式数据处理框架,Flink同时提供了支撑计算和批计算的接口,同时在此基础上抽象出不同的应用类型的组件库,如基于流处理的CEP(复…
前言 本文主要译自Flink Forward 2017的柏林站中Robert Metzger的有关集群规划的How to size your flink cluster一文.该文中主要是考虑网络资源,博主结合自己的使用经验对文中省略的做了一定补充,同时也非常欢迎大伙留言补充. 本文非直译,原文链接如下:https://www.ververica.com/blog/how-to-size-your-apache-flink-cluster-general-guidelines 文中拿捏不准的地方,…
2. Flink中的数据传输 在一个运行的application中,它的tasks在持续交换数据.TaskManager负责做数据传输.TaskManager的网络组件首先从缓冲buffer中收集records,然后再发送.也就是说,records并不是一个接一个的发送,而是先放入缓冲,然后再以batch的形式发送.这个技术可以高效使用网络资源,并达到高吞吐.类似于网络或磁盘 I/O 协议中使用的缓冲技术. 这里需要注意的是:传输缓冲buffer中的记录,隐含表示的是,Flink的处理模型是基于…
官网教程: https://opsx.alibaba.com/mirror 1.下载配置文件到 /etc/yum.repos.d 目录 wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo 注意:具体文件需要根据你的centos版本来确定. 2. yum makecache 3.至于其他源的配置,也是这样操作的,具体的Linux源网站有如下: http://centos.ust…