kafka文档翻译（一）

【kafka文档翻译（一）】的更多相关文章

kafka文档翻译（一）

原文来自(http://kafka.apache.org/documentation.html) 本文只做简单的翻译,水平有限,仅供学习交流使用如有错误,欢迎点评指正 1 准备开始 1.1 介绍 kafka是一个分布式的,分区的,复用的日志提交服务.它以一种独特的设计方式提供消息传递系统的功能. 首先让我们回顾一些基本的消息术语 * kafka在不同的类别中维持消息,这些类别被称为主题(topic) * 我们把发布消息给kafka topic的程序称为生产者(producer) * 我们称那…

Kafka官方文档翻译——简介

简介 Kafka擅长于做什么? 它被用于两大类应用: 在应用间构建实时的数据流通道构建传输或处理数据流的实时流式应用几个概念: Kafka以集群模式运行在1或多台服务器上 Kafka以topics的形式存储数据流每一个记录包含一个key.一个value和一个timestamp Kafka有4个核心API: Producer API:用于应用程序将数据流发送到一个或多个Kafka topics Consumer API:用于应用程序订阅一个或多个topics并处理被发送到这些topics中的…

Kafka官方文档翻译——设计

下面是博主的公众号,后续会发布和讨论一系列分布式消息队列相关的内容,欢迎关注. --------------------------------------------------------------------------------------------------------- Design 1. Motivation 我们设计Kafka用来作为统一的平台来处理大公司可能拥有的所有实时数据源.为了做到这点,我们必须思考大量的使用场景. 它必须有高吞吐去支持大数据流,例如实时日志聚合.…

Kafka官方文档翻译——实现

IMPLEMENTATION 1. API Design Producer APIs Producer API封装了底层两个Producer: kafka.producer.SyncProducer kafka.producer.async.AsyncProducer class Producer { /* Sends the data, partitioned by key to the topic using either the */ /* synchronous or the async…

Kafka介绍 (官方文档翻译)

摘要:Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写.Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据. 这种动作(网页浏览,搜索和其他用户的行动)是在现代网络上的许多社会功能的一个关键因素. 这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决. 对于像Hadoop的一样的日志数据和离线分析系统,但又要求实时处理的限制,这是一个可行的解决方案.Kafka的目的是通过Hadoop的并行加载机制来统一线…

Apache Kafka官方文档翻译（原创）

Apache Kafka是一个分布式流平台.准确的说是什么意思呢?我们认为流平台具有三种关键能力: 1.让你对数据流进行发布订阅.因此他很像一个消息队列和企业级消息系统. 2.让你以高容错的方式存储数据流. 3.让你在数据流出现时处理他们. kafka擅长什么?他通常被用在两大类应用: 1.构建一个能可靠的在系统或应用之间获取数据的实时的数据流管道. 2.构建一个能转换或响应数据流的实时流应用. 为了更好的理解kafka是如何做到上面的事,下面我们深入探索kafka的各种姿势. 首先了解几个概念…