标签:kafka

Flume

Flume +Kafka 的基本配置

Flume +Kafka 的基本配置
环境: centos7 Flume1.6 kafka_2.10-0.10.1.0 上一篇已经介绍如何安装和配置flume,这一篇将介绍如何配置 Kafka sinks 有这么一个场景: 这里,我们使用Flume作为日志收集系统,将收集到的数据输送到Kafka中间件,以供Spark...

天涯孤鸟 1年前 (2017-07-02) 2616℃ 0评论 2喜欢

Kafka

Kafka监控工具—Kafka Manager

Kafka监控工具—Kafka Manager
一、Kafka Manager 简述 Kafka Manager 是雅虎开源的一款Kafka管理工具,它具有如下功能: 1、管理多个集群 2、方便检查群集状态(主题,消费者,偏移量,代理,副本分布,分区分布) 3、选择要运行的首选副本 4、重新分配运行分区(基于生成的分配)...

天涯孤鸟 2年前 (2016-12-31) 2194℃ 0评论 1喜欢

Kafka

Kafka监控工具—KafkaOffsetMonitor

Kafka监控工具—KafkaOffsetMonitor
一、KafkaOffsetMonitor简述 KafkaOffsetMonitor是Kafka的一款客户端消费监控工具,用来实时监控Kafka服务的Consumer以及它们所在的Partition中的Offset,我们可以浏览当前的消费者组,并且每个Topic的所有Partit...

天涯孤鸟 2年前 (2016-12-23) 7147℃ 3评论 0喜欢

Kafka

Windows7环境下搭建Kafka

Windows7环境下搭建Kafka
Kafka简介: Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据,其特性如下: 通过O(1)的磁盘数据结构提供消息的持久化,这种结构对于即使数以TB的消息存储也能够保持长时间的稳定性能。 高吞吐量:即使是非常普通的硬件Kafk...

天涯孤鸟 2年前 (2016-12-02) 2211℃ 2评论 2喜欢