- 博客(15)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 Kafka知识问答
1、Apache Kafka 是什么?Apach Kafka 是一款分布式流处理框架，用于实时构建流处理应用。它有一个核心 的功能广为人知，即作为企业级的消息引擎被广泛使用。你一定要先明确它的流处理框架地位，这样能给面试官留 下一个很专业的印象。2、什么是消费者组?消费者组是 Kafka 独有的概念，如果面试官问这 个，就说明他对此是有一定了解的。我先给出标准答案： 1、定义：即消费者组是 Kafka 提供的可扩展且具有容错性的消费者机制。 2、原理：在 Kafka 中，消费者组是一个由多个
2021-06-01 14:11:19
289
原创 永洪BI开发脚本总结
一、截取函数righr（）函数，right函数语法：right(text,num_chars)其中text表示要截取的字符串num_chars表示截取的字符的数量二、脚本定义文本里的字体格式：var gf = new GFont("Arial", BOLD, 50);var loc = new Locator([], OBJECT, DETAIL);var col=new Color(java.awt.Color.RED)文本1.setForeground(loc,col)文本1.s
2020-09-03 13:16:44
8537
1
原创 BI开发问题总结-暂存
mysql的时区错误问题解决方式：show variables like '%time_zone%';set global time_zone='+8:00';6.0P+63p42o/NtPWdsG4CEUd1w-L83-V6.0-C10-E10-N10-D350888c2efe1be-M131071-S199105162210个g的考虑集群计算的时候内存还占用了未分配给永洪的。（分配的是在计算，未分配的是存计算的集）所以分配内存最好值最大可用内存的一半1，为什么有表格滚动条在表格里
2020-07-17 10:52:23
2798
2
原创 dws 分析表
分析表：set search_path = "模式"; ANALYZE；清除经常更新导致的磁盘碎片：VACUUM full + 表名；
2019-10-30 19:19:49
383
原创 ES 总结
打开/etc/security/limits.conf* soft nofile 65536* hard nofile 65536* soft nproc 65536* hard nproc 65536第二个问题：max virtual memory areas vm.max_map_count [65530] likely too low, increase to at least...
2019-10-24 20:30:37
221
原创 华为dws锁表解决方案
查询表执行进程select query,pid,state from pg_stat_activity where query like '%cls_contract_sum%';杀进程select pg_terminate_backend(140453160589056);
2019-09-20 14:36:13
485
原创 Oracle触发器学习总结-Mr王
Oracle触发器学习总结触发器简介补充触发器的分类触发器语法触发器能实现如下功能：小例子触发器简介触发器的本质是一个存储过程，顾名思义发生特定事件时Oracle会执行触发器中的代码。细分它的组成可以分为3个部分：第一部分在什么条件下触发器会执行，即触发器被触发的事件。第二部分在什么时间点执行触发器即触发器的发生事件例如before,after。第三部分触发器自身所要做的事情，就是触发...
2019-05-20 23:47:44
305
转载 阿里云datax工具使用详解
阿里云datax实操详解datax介绍特征安装前准备工作-系统需求快速开始补充datax介绍DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台，实现包括 MySQL、SQL Server、Oracle、PostgreSQL、HDFS、Hive、HBase、OTS、ODPS 等各种异构数据源之间高效的数据同步功能。特征DataX本身作为数据同步框架，将不同数据源的同步抽象为从源头...
2019-05-20 13:13:06
2418
转载 sparkStreaming读取kafka的两种方式
第一个是：Receiver-base 基于Receiver的kafka数据消费模式就是先把数据从kafka中读取出来然后缓存到内存然后再定时处理。这里要引入一个参数配置spark.streaming.receiver.writeAheadLog.enable 防止集群闪退偏移量没做好造成数据丢失。 Receiver-basede kafka读取模式是基于Kafka的高阶（high-...
2018-04-20 15:34:46
15862
转载 实时计算框架Spark与Storm
对比点 StormSpark Streaming实时计算模型纯实时，来一条数据处理一条准实时，对一个时间段内的数据收集起来作为一个RDD，再处理实时计算迟度 毫秒级秒级吞吐量低高事物机制支持完善支持，但不够完善健壮性/容错性Zookeeper,Acker,非常强Checkpoint,WAL,一般动态调整并行度支持不支持Spark Streaming与Storm的应用场景对于St...
2018-04-20 15:32:51
2312
转载 plsql登录oracle数据库显示密码将要过期处理办法，改成用户密码永不过期
1、查看用户的proifle是哪个，一般是default： sql>SELECT username,PROFILE FROM dba_users; 2、查看指定概要文件（如default）的密码有效期设置： sql>SELECT * FROM dba_profiles s WHERE s.profile='DEFAULT' AND resource_name='...
2018-04-20 15:27:11
8497
原创 数据库表被锁解决办法plsql，以及查看表执行进程--可以查看那个用户对哪张表执行操作
--查看哪个表正在被执行或者被锁 Sql代码 select b.owner,b.object_name,a.session_id,a.locked_mode from v$locked_object a,dba_objects b where b.object_id = a.object_id; --查看是哪个进程引起的 Sql代码 select b.username,b.sid,b....
2018-04-20 15:24:08
7844
原创 Linux下查看、关闭、启动weblogic服务
Linux下查看、关闭、启动weblogic服务查看命令：ps -ef|grep 'weblogic'关闭命令：kill -9 进程 （stopweblogic 会经常出现停止失败）启动并输出日志：nohup ./startWebLogic.sh &...
2018-04-20 15:20:18
5193
fastjson-1.2.36.jar
2017-08-21
dom4j-2.0.1.jar
2017-08-21
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人