下面是博主的公众号,后续会发布和讨论一系列分布式消息队列相关的内容,欢迎关注. --------------------------------------------------------------------------------------------------------- Design 1. Motivation 我们设计Kafka用来作为统一的平台来处理大公司可能拥有的所有实时数据源.为了做到这点,我们必须思考大量的使用场景. 它必须有高吞吐去支持大数据流,例如实时日志聚合.…

简介 Kafka擅长于做什么? 它被用于两大类应用: 在应用间构建实时的数据流通道 构建传输或处理数据流的实时流式应用 几个概念: Kafka以集群模式运行在1或多台服务器上 Kafka以topics的形式存储数据流 每一个记录包含一个key.一个value和一个timestamp Kafka有4个核心API: Producer API:用于应用程序将数据流发送到一个或多个Kafka topics Consumer API:用于应用程序订阅一个或多个topics并处理被发送到这些topics中的…

IMPLEMENTATION 1. API Design Producer APIs Producer API封装了底层两个Producer: kafka.producer.SyncProducer kafka.producer.async.AsyncProducer class Producer { /* Sends the data, partitioned by key to the topic using either the */ /* synchronous or the async…

Apache Kafka是一个分布式流平台.准确的说是什么意思呢?我们认为流平台具有三种关键能力: 1.让你对数据流进行发布订阅.因此他很像一个消息队列和企业级消息系统. 2.让你以高容错的方式存储数据流. 3.让你在数据流出现时处理他们. kafka擅长什么?他通常被用在两大类应用: 1.构建一个能可靠的在系统或应用之间获取数据的实时的数据流管道. 2.构建一个能转换或响应数据流的实时流应用. 为了更好的理解kafka是如何做到上面的事,下面我们深入探索kafka的各种姿势. 首先了解几个概念…

Flume官方文档翻译--Flume 1.7.0 User Guide (unreleased version)(一) Logging raw data(记录原始数据) Logging the raw stream of data flowing through the ingest pipeline is not desired behaviour in many production environments because this may result in leaking sensit…

Spring官方文档翻译(1~6章) 转载至 http://blog.csdn.net/tangtong1/article/details/51326887 Spring官方文档.参考中文文档 一.Spring框架概述 Spring框架是一个轻量级的解决方案,可以一站式地构建企业级应用.Spring是模块化的,所以可以只使用其中需要的部分.可以在任何web框架上使用控制反转(IoC),也可以只使用Hibernate集成代码或JDBC抽象层.它支持声明式事务管理.通过RMI或web服务实现远程访问…

CHENYILONG Blog CALayer---iOS-Apple苹果官方文档翻译之CALayer CALayer /*技术博客http://www.cnblogs.com/ChenYilong/新浪微博http://weibo.com/luohanchenyilong */   CALayer简介 Core Animation是跨平台的,支持iOS环境和Mac OS X环境! 注意:凡是支持跨平台的框架,都不能直接使用UIKit框架,因为UIKit 框架只能应用在iOS而不能用于Mac!…

CHENYILONG Blog iOS网络基础---iOS-Apple苹果官方文档翻译 iOS网络基础 技术博客http://www.cnblogs.com/ChenYilong/ 新浪微博http://weibo.com/luohanchenyilong 百度一下,你就知道 百度搜索 网络访问步骤示意图(1) 网络访问步骤示意图(2) 网络访问的四个步骤 • 第一步:确定地址--URL • 第二步:建立请求• 第三步:建立并启动连接等待网络处理中......• 第四步:连接完成,处理结果备注:…

新博客:完整版 - AVFoundation Programming Guide 分章节版:- 第1章:About AVFoundation - AVFoundation概述- 第2章:Using Assets - 使用Assets- 第3章:Playback - 播放- 第4章:Editing - 编辑- 第5章:Still and Video Media Capture - 静态视频媒体捕获- 第6章:Export - 输出- 第7章:Time and Media Representatio…

Flume官方文档翻译--Flume 1.7.0 User Guide (unreleased version)(一) Flume官方文档翻译--Flume 1.7.0 User Guide (unreleased version)(二) Flume Properties Property Name            Default  Description flume.called.from.service – If this property is specified then the…