
kafka
java_doom
这个作者很懒,什么都没留下…
展开
-
查看kafka版本
如果安装的是apache官网的kafka,那么进入机器如下对应的目录: 标注的 1.0.0就是 kafka的版本原创 2018-07-11 10:43:49 · 1181 阅读 · 0 评论 -
ERROR consumer thread timing out (kafka.tools.ReplayLogProducer$ZKConsumerThrea
执行kafka-replay-log-producer.sh --broker-list hadoop1:9092 --zookeeper hadoop1:2181 --inputtopic test --outputtopic test2 会报错 ERROR consumer thread timing out (kafka.tools.ReplayLogProducer$ZKConsum...原创 2018-07-05 11:35:20 · 380 阅读 · 0 评论 -
刷盘方式
刷盘方式 同步刷盘:在消息到达MQ后,RocketMQ需要将数据持久化,同步刷盘是指数据到达内存之后,必须刷到commitlog日志之后才算成功,然后返回producer数据已经发送成功。 异步刷盘:,同步刷盘是指数据到达内存之后,返回producer说数据已经发送成功。,然后再写入commitlog日志。 commitlog: commitlog就是来存储所有的元信息,包含消息体...原创 2018-07-04 09:51:51 · 1447 阅读 · 0 评论 -
java代码实现kafka消费端consumer的from-beginning功能
只需要在代码中加入 props.put("auto.offset.reset", "earliest"); props.put("group.id", UUID.randomUUID().toString()); 完整例子 //1、准备配置文件 Properties props = new Properties(); props.put("boo...2018-04-09 16:20:30 · 5157 阅读 · 1 评论 -
一个kafka错误
一个像kafka模拟生产者发送消息的程序, //1、准备配置文件 Properties props = new Properties(); props.put("bootstrap.servers", "hadoop1:9092"); props.put("acks", "all"); props.put("retries", 0); ...原创 2018-03-21 16:27:44 · 135 阅读 · 0 评论