- 博客(5)
- 收藏
- 关注
原创 Spark优化笔记
title: Spark优化笔记 date: 2020-01-12 15:23:24 tags: spark categories: bigdata top: true 优化杂谈 优化点一:资源 spark作业在运行的时候能占用多少资源:cpu、memory 分配”足够多“的资源,在一定范围内,增加资源 和 性能提升 成正比的 Spark on YARN 作业跑在规划好的YARN的队列中 ...
2020-01-12 15:39:13 121
原创 初识alluxio
title: 初识alluxio date: 2020-01-12 15:33:27 tags: alluxio categories: bigdata top: true Alluxio Tachyon 前身的名字 超光速粒子 以内存为中心的分布式文件系统 HDFS、S3… 介于计算层和存储层之间 计算层:Spark、Flink、MapReduce 存储层在内存中的一个Cache系统...
2020-01-12 15:37:53 100
转载 OLTP和OLAP
title: OLTP和OLAP date: 2020-01-05 14:54:18 tags: bigdata categories: bigdata top: true 1 OLTP和OLAP online transaction processing,联机事务处理。业务类系统主要供基层人员使用,进行一线业务操作,通常被称为联机事务处理。 online analytical proce...
2020-01-12 15:05:48 111
转载 浅谈四层和七层负载均衡
title: 浅谈四层和七层负载均衡 date: 2020-01-05 13:49:24 tags: 负载均衡 categories: linux top: true 浅谈四层和七层负载 111关于负载均衡,经常听到四层负载均衡和七层负载均衡的说法,他们之间有什么关系和区别呢,今天就简单总结概括下。 概述 用一句话来说,四层负载均衡就是工作在计算机网络OSI七层分层的第四层(传输层)的,...
2020-01-12 14:50:54 184
原创 storm创建drpc远程客户端
创建DRPC远程客户端 DRPCClient创建方法如下: //conf map, drpc server, port no, timeout for the call new DRPCClient(conf, "192.168.0.217", 3772, 5000); conf如下: Config conf = new Config(); conf.setDebug(false); 这将产生...
2020-01-12 14:36:20 151 1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人