自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

98k

Java、大数据、presto

  • 博客(17)
  • 资源 (1)
  • 收藏
  • 关注

原创 Excel多个工作簿合成为一个工作表

Excel多个工作簿合成为一个工作表目录前言 第一步:多张工作簿合并成一个“汇总工作簿”,操作如下: 第二步:把多张sheet表合并成一张sheet工作表,操作如下: 总结前言在工作中,我们会遇到这种情况,收集到各组中工作人员的信息,没人一张表,会产生大量的工作簿,汇总时一张一张复制粘贴费时费力,所以我们需要把多个Excel工作簿的内容汇总到一张Excel工作表中。这样可以方便快捷的进行数据整理。针对这种情况,我们一般可以分成两步去操作:1、首先,多个工作簿汇合并成一个“...

2020-08-21 14:02:20 30287 4

原创 Excel如何拆分sheet(宏功能应用)

在运用Excel表格中,会出现将多个sheet需要分别变成一个单独的Excel表格,复制粘贴不仅费时,还会出现格式等问题,通过Excel中的宏应用可以轻松搞定操作步骤:1、确认WPS版本支持宏功能(灰色为不可用)2、如WPS版本不支持宏功能可以下载vba插件,安装完成重启WPS即可 附我用的WPS版本及vba插件网盘下载地址: 链接:https://p...

2019-05-06 17:25:31 11721 1

原创 如何开发presto 自定义UDF函数

作为一个新手菜鸟,在对presto 函数进行开发的时候遇到了很多很多的问题,虽然花费了很多的时间,但最后还是成功的开发了出来UDF函数。相信很多人都看过一篇《如何开发 Presto 自定义函数(UDF) 》的文章,其实那篇文章讲的很好,但是其中有一些细节并没有写出来,可能对一部分人来说,在开发过程中存在问题。现在分享一下我开发的过程,希望可以帮助到大家。步骤:1、创建maven工程2、修改pom文...

2018-06-13 17:22:46 7108

原创 presto udf pom 文件

<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0....

2018-05-21 15:24:13 1488

原创 Presto 启动报错 : ERROR: [Errno 2] No such file or directory (原因及解决办法)

在启动presto的时候 突然间发现启动不了(以前都是正常使用的),错误信息:ERROR: [Errno 2] No such file or directory解决办法:在root权限下运行 即可正常启动su root./launcher run如图,已经可以正常运行原因:并没有找到具体是因为什么造成的,同时也在跟踪这个问题,如果有人找到了原因,希望可以分享一下。Thanks♪(・ω・)ノ...

2018-05-15 17:00:52 16157 6

原创 Centos7 无法启动 eclipse 原因及解决方案

在linux 系统中启动eclipse ,无法启动,出现以下提示信息:网上搜了以下解决方案 ,有很多方法,修改eclipse.ini 文件  删除eclipse.ini 文件,但是都没有解决我的问题,最后找到原因:JDK 位数 和eclipse 的不对应,使得 eclipse 无法识别到自己配置好的JDK解决办法:重新安装对应位数的JDK 或者eclipse(注:可能实际情况不同,解决的方法不同,...

2018-05-15 15:32:23 3093

原创 linux 安装jdk 出现 :/lib/ld-linux.so.2: bad ELF interpreter: 没有那个文件或目录 问题

运行命令sudo yum install glibc.i686

2018-05-15 11:35:59 1287

原创 maven pom

<build> <!--配置打包时不过滤非java文件开始 --> <!--说明,在进行模块化开发打jar包时,maven会将非java文件过滤掉, xml,properties配置文件等,但是这些文件又是必需的,  使用此配置可以在打包时将不会过滤这些必需的配置文件。 --> <resources> <resource> &lt...

2018-05-06 14:21:33 117

原创 Linux\Windows 环境下部署 Maven 以及 Eclipse中安装Maven插件

Windows系统:工具:                1、Windows 7                2、jdk1.8版本以上                3、eclipse安装包                 4、maven安装包(PS:版本看自己电脑,我是现在当前最新发布的版本)JDK官方下载地址:http://www.oracle.com/technetwork/java/ja...

2018-04-08 19:43:10 277

原创 Presto实现原理

Facebook的数据仓库存储在少量大型Hadoop/HDFS集群。Hive是Facebook在几年前专为Hadoop打造的一款数据仓库工具。在以前,Facebook的科学家和分析师一直依靠Hive来做数据分析。但Hive使用MapReduce作为底层计算框架,是专为批处理设计的。但随着数据越来越多,使用Hive进行一个简单的数据查询可能要花费几分到几小时,显然不能满足交互式查询的需求。Faceb...

2018-03-16 11:48:55 2619

原创 Presto 文档学习之 窗口函数(Window Functions)排名函数(Ranking Functions)

Hello!大家好,本人菜鸟一枚,最近在领导的要求下学习Prestodb,没办法只能打开官方文档来自我学习,对于英语渣的我来说无疑是痛苦的,看到的页面和天书一样谷歌翻译过来的吧 很多句子看不懂想要具体表达的意思对于会SQL Server 和Oracle 数据库用过窗口函数的大神来说可以很容易的理解prestodb 中窗口函数的用法,因为几乎是一样的,但是只会mysql的我 只能四处翻资料学习,只看...

2018-03-15 17:24:29 10684

原创 Presto学习之:命令行接口运行SQL语句错误:Query is gone (server restarted?)???

错误提示:presto:xcygxq_demo_1128> SELECT * FROM exam_marker;                Query is gone (server restarted?)错误原因:在下载命令行接口 presto-cli-0.196-executable.jar 包的时候是从中文下载地址http://prestodb-china.com/docs/cur...

2018-03-14 19:08:52 1717

原创 Git基本常用命令

Git基本常用命令如下:   mkdir:         XX (创建一个空目录 XX指目录名)  pwd:          显示当前目录的路径。  git init          把当前的目录变成可以管理的git仓库,生成隐藏.git文件。  git add XX       把xx文件添加到暂存区去。  git commit –m “XX”  提交文件 –m

2017-12-18 19:36:57 212

原创 用Scala语言实现冒泡排序

Java语言冒泡排序:/* * 冒泡排序 */public class BubbleSort {  public static void main(String[] args) {    int[] arr={1,4,2,-4,6,22,8,-9,-88,0,56,437,97,-356,666,-8};    System.out.println("排序前数组为:");

2017-12-12 21:50:24 1424

原创 zookeeper节点无法启动(myid缺失)

错误信息:错误原因:集群中的每台ZK server都会有一个用于惟一标识自己的id,有两个地方会使用到这个id:myid文件和zoo.cfg文件中。myid文件存储在dataDir目录中,指定了当前server的server id。在zoo.cfg文件中,根据server id,配置了每个server的ip和相应端口。Zookeeper启动的时候,读取myid文件中的server

2017-11-25 09:39:00 17958

原创 MapReduce 中的两表 join

1. 概述在传统数据库(如:MYSQL)中,JOIN操作是非常常见且非常耗时的。而在HADOOP中进行JOIN操作,同样常见且耗时,由于Hadoop的独特设计思想,当进行JOIN操作时,有一些特殊的技巧。本文首先介绍了Hadoop上通常的JOIN实现方法,然后给出了几种针对不同输入数据集的优化方法。2. 常见的join方法介绍假设要进行join的数据分别来自File1和File2.

2017-11-21 21:46:21 227

原创 输入整数,输出最大值和最小值

从键盘上输入任意个数的整数,输出最大值和最小值。package com.szd.test;import java.util.Scanner;public class MaxAndMin { public static void main(String[] args) { int min = 0; int max = 0; Scanner s

2017-08-11 13:49:36 4910

使用Socket和ServerSocket实现多人聊天的聊天室程序

基于TCP的网络编程,使用Socket和ServerSocket实现多人聊天的聊天室程序,Java网络编程章节训练的小程序

2017-08-21

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除