3 forrest_ou

尚未进行身份认证

像傻不是傻,还是很多傻。谜底我的名

等级
TA的排名 6w+

过去的2017

以时间戳划分大年初一---正月十六  过年耍。初中的老基友结婚,好幸福!正月十七---五月一号  品高实习,我已经回想不起来我做了写啥,翻翻博客和照片找到一些记忆,不深刻。五月一号---七月四号  回学校答辩,拍毕业照,做毕业都做的事,青春散场,说散就散七月四号---二月九号  入职品高大数据解决方案中心。入职培训一个月,进入项目组,开始的时候用react+ant...

2018-02-09 17:13:04

kafka数据量快速循环增加删除问题

问题现象1、监控观察一个主题数据量的变化,数据量会持续增加然后删除减少,然后再持续增加然后再删除减少,一直循环2、观察日志:rolled...... scheduling...... deleting....... 也是这样对一个主题一直循环原因解释首先成功写入kafka了,只是写入后很快就被删除了。这里有几个原因。1、kafka配置了lo

2018-01-30 17:21:08

kafka扩容和分区重新分配

扩容:增加机器,例如原来三台服务器的kafka集群增加两台机器成为有五台机器的kafka集群,跟搭建差不多分区重新分配:在原来机器上的主题分区不会自动均衡到新的机器,需要使用分区重新分配工具来均衡均衡重新分配官方文档地址:点击打开链接翻译官方文档中文地址:点击打开链接上面两个链接中的文档描述的很详细。这里记录一下关键步骤,更主要是总结实际操作过来之后的问题和新的知识

2018-01-23 17:32:57

mirrormaker(2)---权限问题和白名单

kafka版本:confluent-3.1.2权限:SASLmirrormaker基础:   点击打开链接一、权限问题如果集群配置了权限,mirrormaker的成功运行需要有两个权限。1、被mirror的源集群的消费权限2、mirror目的地的目标集群的生产权限这里正好对应了mirrormaker工作的整个过程,先消费过来,再生产进去。

2018-01-23 16:16:57

kafka删除主题数据和删除主题

kafka使用confluent-3.1.2   删除的主题名:test1、删除主题在server.properties中增加设置,默认未开启delete.topic.enable=true删除主题命令/bin/kafka-topics--delete--topictest--zookeeperlocalhost:21812、删除主题数据如果想保留主题,只删

2018-01-08 10:34:26

mirrormaker

概述Mirroringdatabetweenclusters(SourceCluster ---> DestinationCluster)就是通过使用kafka自带的mirror-maker工具把一个集群里的主题cp到另外一个kafka集群中,使用场景:1、数据需要迁移到新集群;2、多个集群之间的数据需要同步…………使用nohupbin/kafka-mi

2018-01-05 17:03:39

通过时间戳查询指定分区的offsets

***使用的方法(offsetsForTimes()):Propertiesprops=newProperties();KafkaConsumerconsumer=newKafkaConsumer<>(props);java.util.MappartitionTimestampOffsets=consumer.offsetsForTimes(java.util.

2018-01-05 15:38:55

kafka新建主题指定副本分布

kafka使用confluent-3.1.2kafka新建topic,kafka决定副本分布bin/kafka-topics--create--topictest001--zookeeperlocalhost:2181--replication-factor3--partition3//新建分区3,副本3的主题。//kafka决定副本分布的方式给第一个分区随机选择

2018-01-04 18:04:26

linux hostname立即永久生效+SSH免密登录

系统版本:CentOS6.5lsb_release-a//查看版本信息hostname立即永久生效方法一:hostnamenewHostname//临时生效vi/etc/sysconfig/network//重启后生效//两者同时使用就满足马上生效并永久修改方法二vi/etc/sysconfig/networksysctlke

2018-01-04 17:33:42

搭建kafka

kafka搭建

2017-09-27 18:38:02

搭建hadoop

搭建hadoop

2017-09-27 18:34:56

Windows ZIP安装MySQL

WindowsZIP安装MySQL

2017-09-27 18:26:36

常用linux命令实战

常用linux命令,实践总结

2017-09-27 18:22:43

IDEA导入多个项目jar包和符号不存在问题

2017-08-24 19:16:30

工作便签1

工作便签一

2017-04-06 17:26:35

linux安装配置xwiki

linux安装配置xwiki

2017-03-29 20:08:31

dokuwiki的安装配置,基于apache

dokuwiki的安装配置,基于apache

2017-03-07 21:46:22

Linux安装php-7.0.16,完成php和apache的配置

Linux安装php-7.0.16,完成php和apache的配置

2017-03-07 21:27:16

linux安装apache

使用ssh连接远程linux安装apache-2.4.25

2017-03-07 17:02:19

intellij idea注册码问题

解决intellijidea安装过程中注册码的问题,解决用一段时间后打开会出现yourlicensehasexpired的弹窗需要注册码的问题

2017-02-27 15:34:20

查看更多

勋章 我的勋章
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!