4 forrest_ou

尚未进行身份认证

像傻不是傻,还是很多傻。谜底我的名

等级
TA的排名 7w+

过去的2017

以时间戳划分大年初一 --- 正月十六    过年耍。初中的老基友结婚,好幸福!正月十七 --- 五月一号    品高实习,我已经回想不起来我做了写啥,翻翻博客和照片找到一些记忆,不深刻。五月一号 --- 七月四号    回学校答辩,拍毕业照,做毕业都做的事,青春散场,说散就散七月四号 --- 二月九号    入职品高大数据解决方案中心。入职培训一个月,进入项目组,开始的时候用react+ant ...

2018-02-09 17:13:04

kafka数据量快速循环增加删除问题

问题现象1、监控观察一个主题数据量的变化,数据量会持续增加然后删除减少,然后再持续增加然后再删除减少,一直循环2、观察日志:rolled......  scheduling......  deleting.......  也是这样对一个主题一直循环原因解释首先成功写入kafka了,只是写入后很快就被删除了。这里有几个原因。1、kafka配置了lo

2018-01-30 17:21:08

kafka扩容和分区重新分配

扩容:增加机器,例如原来三台服务器的kafka集群增加两台机器成为有五台机器的kafka集群,跟搭建差不多分区重新分配:在原来机器上的主题分区不会自动均衡到新的机器,需要使用分区重新分配工具来均衡均衡重新分配官方文档地址:点击打开链接翻译官方文档中文地址:点击打开链接上面两个链接中的文档描述的很详细。这里记录一下关键步骤,更主要是总结实际操作过来之后的问题和新的知识

2018-01-23 17:32:57

mirrormaker(2)---权限问题和白名单

kafka版本:confluent-3.1.2权限:SASLmirrormaker基础:    点击打开链接一、权限问题如果集群配置了权限,mirrormaker的成功运行需要有两个权限。1、被mirror的源集群的消费权限2、mirror目的地的目标集群的生产权限这里正好对应了mirrormaker工作的整个过程,先消费过来,再生产进去。

2018-01-23 16:16:57

kafka删除主题数据和删除主题

kafka使用confluent-3.1.2      删除的主题名:test1、删除主题在server.properties中增加设置,默认未开启delete.topic.enable=true删除主题命令/bin/kafka-topics --delete --topic test --zookeeper localhost:21812、删除主题数据如果想保留主题,只删

2018-01-08 10:34:26

mirrormaker

概述Mirroring data between clusters (Source Cluster  --->  Destination Cluster)就是通过使用kafka自带的mirror-maker工具把一个集群里的主题cp到另外一个kafka集群中,使用场景:1、数据需要迁移到新集群; 2、多个集群之间的数据需要同步…………使用nohup bin/kafka-mi

2018-01-05 17:03:39

通过时间戳查询指定分区的offsets

*** 使用的方法(offsetsForTimes()):Properties props = new Properties();KafkaConsumer consumer = new KafkaConsumer<>(props);java.util.Map partitionTimestampOffsets = consumer.offsetsForTimes(java.util.

2018-01-05 15:38:55

kafka新建主题指定副本分布

kafka使用confluent-3.1.2kafka新建topic , kafka决定副本分布bin/kafka-topics --create --topic test001 --zookeeper localhost:2181 --replication-factor 3 --partition 3//新建分区3,副本3的主题。//kafka决定副本分布的方式给第一个分区随机选择

2018-01-04 18:04:26

linux hostname立即永久生效+SSH免密登录

系统版本:CentOS6.5lsb_release -a //查看版本信息hostname立即永久生效方法一:hostname newHostname //临时生效vi /etc/sysconfig/network //重启后生效//两者同时使用就满足马上生效并永久修改方法二vi /etc/sysconfig/networksysctl ke

2018-01-04 17:33:42

搭建kafka

kafka搭建

2017-09-27 18:38:02

搭建hadoop

搭建hadoop

2017-09-27 18:34:56

Windows ZIP安装MySQL

Windows ZIP安装MySQL

2017-09-27 18:26:36

常用linux命令实战

常用linux命令,实践总结

2017-09-27 18:22:43

IDEA导入多个项目jar包和符号不存在问题

2017-08-24 19:16:30

工作便签1

工作便签一

2017-04-06 17:26:35

linux安装配置xwiki

linux安装配置xwiki

2017-03-29 20:08:31

dokuwiki的安装配置,基于apache

dokuwiki的安装配置,基于apache

2017-03-07 21:46:22

Linux安装php-7.0.16,完成php和apache的配置

Linux安装php-7.0.16,完成php和apache的配置

2017-03-07 21:27:16

linux安装apache

使用ssh连接远程linux安装apache-2.4.25

2017-03-07 17:02:19

intellij idea注册码问题

解决intellij idea安装过程中注册码的问题,解决用一段时间后打开会出现your license has expired的弹窗需要注册码的问题

2017-02-27 15:34:20

查看更多

勋章 我的勋章
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!