自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(118)
  • 收藏
  • 关注

原创 Mybatis MBG 逆向工程 (基于maven)

1.pom.xml中添加依赖<dependencies> <dependency> <groupId>org.mybatis.generator</groupId> <artifactId>mybatis-generator-core</artifactId> <version>1.3.5</version> </dependency></depende

2020-11-09 10:42:08 207

原创 axios库api封装

封装api的目录结构如下:接口返回值包括状态码、说明信息、数据内容也可能是异常信息,为了避免在调用每个接口时都需要针对异常进行捕获,所以这里对ajax请求进行了封装,在ajax.js中编辑如下代码:import axios from 'axios'axios.defaults.baseURL = '/api'axios.defaults.timeout = 10000//添...

2019-12-30 15:23:39 296

原创 vue国际化配置及使用

vue项目国际化,目录结构如下:其中i18n目录下文件为国际化内容用于显示各种语言的文件在i18n/langs下,其中index.js为各种语言的整合文件,内容如下:import en from './en'import zh from './zh-cn'import tw from './zh-tw'import zhLocale from 'element-ui/lib...

2019-12-30 14:55:27 1131

转载 用ffmpeg命令行转压视频

ffmpeg -i input.mp4 -vcodec libx264 -preset fast -crf 20 -y -vf "scale=1920:-1" -acodec libmp3lame -ab 128k output.mp4-preset:指定编码的配置。x264编码算法有很多可供配置的参数,不同的参数值会导致编码的速度大相径庭,甚至可能影响质量。为了免去用户了解算法,然后手工配...

2019-10-17 10:00:45 659

原创 springmvc编写跨域访问fiter

先写一个CorsFilter类public class CorsFilter implements Filter{ @Override public void init(FilterConfig filterConfig) throws ServletException { } @Override public void doFilter(ServletRequest s...

2019-02-18 20:42:13 202

原创 springmvc 框架,获得音频文件pcm

直接获取文件并转化成bytes是不可以的,需要使用如下代码获取文件public void test(@RequestParam(value="file",required=false) MultipartFile file) {        CommonsMultipartFile cf= (CommonsMultipartFile)file;         DiskFileItem...

2019-02-18 13:09:13 749 1

原创 XAMPP提示 Access forbidden情况的处理

在xampp\apache\conf下的httpd.conf增加如下内容:&lt;Directory "路径"&gt;    Options Indexes FollowSymLinks Includes ExecCGI    AllowOverride All    Require all granted&lt;/Directory&gt;为了更改启动的默认项目路径还要修改Doc...

2019-02-03 13:13:16 2793 1

原创 log4j配置

使用步骤导入 log4j-xxx.jar在 src 下新建 log4j.properties(路径和名称都不允许改变)        ConversionPattern :写表达式         log4j.appender.LOGFILE.File 文件位置及名称(日志文件扩展名.log) log4j.rootCategory=DEBUG, CONSOLE ,LOGF...

2019-01-26 14:04:43 191

原创 eclipse文档类型定义(dtd)导入后仍然没有提示的解决方案

需要导入相应的dtd文件,包如下Window--&gt; preference --&gt; XML --&gt; XMl catalog --&gt; add 按钮,举例:ok后,导入dtd 标签后会出现提示 

2019-01-18 14:05:13 745

原创 maven 热部署

1. 修改 tomat/conf/tomcat-users.xml 添加&lt;role rolename="manager-gui"/&gt; &lt;role rolename="manager-script"/&gt; &lt;user username="tomcat" password="tomcat" roles="manager-gui,manage

2019-01-18 11:50:14 426

原创 资源拷贝插件

1.maven 默认只把 src/main/resources 里面的非.java 文件进行编译到classes 中2.如果希望 src/main/java 下的文件也被编辑到 classes 中,在 pom.xml中配置2.1 下面内容配置在&lt;build&gt;中&lt;resources&gt;   &lt;resource&gt;     &lt;directory...

2019-01-18 11:47:40 550

原创 Maven部署SSM的POM配置内容

&lt;project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0...

2019-01-18 11:28:09 259

原创 Maven 项目之间的关系

1. 依赖关系1.1 标签&lt;dependency&gt;把另一个项目的 jar 引入到当过前项目1.2 自动下载另一个项目所依赖的其他项目2. 继承关系. 2.1 父项目是 pom 类型2.2 子项目jar或war,如果子项目还是其他项目的父项目,子项目也是 pom 类型. 2.3 有继承关系后,子项目中出现&lt;parent&gt;标签2.3.1 如果子项目和&lt;grou...

2019-01-17 22:15:24 674

原创 maven配置setting

需要配置的主要有三项:1.jdk版本2.maven镜像地址3.设置本地库路径&lt;?xml version="1.0" encoding="UTF-8"?&gt;&lt;!--Licensed to the Apache Software Foundation (ASF) under oneor more contributor license agreements. ...

2019-01-16 22:41:04 532

原创 eclipse 设置默认编码为Utf-8

需要设置的几处地方为: Window-&gt;Preferences-&gt;General -&gt;Content Type-&gt;Text-&gt;JSP 最下面设置为UTF-8 Window-&gt;Preferences-&gt;General-&gt;Workspace   面板Text file encoding 选择UTF-8 Window-&gt;Preferenc...

2018-08-18 20:04:05 209

原创 Eclipse各版本代号一览表以及官网上有很多版本的eclipse的比较

Eclipse各版本代号一览表Eclipse的设计思想是:一切皆插件。Eclipse核心很小,其它所有功能都以插件的形式附加于Eclipse核心之上。Eclipse基本内核包括:图形API(SWT/Jface),Java开发环境插件(JDT),插件开发环境(PDE)等。官网下载地址:http://www.eclipse.org/downloads/packages所有版本列表:...

2018-08-18 13:47:50 96540 6

转载 Hbase和Mysql文件互相导入

以下的步骤都是我实验成功后的记录下来的,只记录了大体的步骤,由于环境的差异,可能导致你的操作并不一定会成功!不要机械的式的复制,要结合你本机的环境去处理。对于配置选项,有些我也不抬理解,待理解之后再来补充。实验环境:Linux 16.04.3hadoop-2.8.1hbse-1.2.6hive-2.2.0sqoop-1.4.6.bin__hadoop-2.0.4-alpha一、...

2018-07-25 20:47:13 2424

原创 UDF开发以及如何添加到HIVE中

自定义开发案例1)创建一个java工程,并创建一个lib文件夹2)将hive的jar包解压后,将apache-hive-1.2.2-bin\lib文件下的jar包都拷贝到java工程中。3)创建一个类 package com.lzl.hive; import org.apache.hadoop.hive.ql.exec.UDF;   public cl...

2018-07-25 16:59:40 3307

原创 配置 Hive 支持 JSON 存储

在 Hive 中采用 Json 作为存储格式,需要建表时指定 Serde。Insert into 时,Hive 使用 json格式进行保存,查询时,通过 json 库进行解析。Hive 默认输出是压缩格式,这里改成不压缩。具体操作步骤如下:1) 将 json-serde-1.3.8-jar-with-dependencies.jar 导入到 hive 的/opt/module/hive/li...

2018-07-25 16:48:22 1597

转载 Kafka HA Kafka一致性重要机制之ISR(kafka replica)

一、kafka replica当某个topic的replication-factor为N且N大于1时,每个Partition都会有N个副本(Replica)。kafka的replica包含leader与follower。 Replica的个数小于等于Broker的个数,也就是说,对于每个Partition而言,每个Broker上最多只会有一个Replica,因此可以使用Broker id 指...

2018-07-25 14:10:13 2970

转载 Kafka Consumer的两种接口(高阶低阶)

Kafka Consumer接口对于kafka的consumer接口,提供两种版本, high-level一种high-level版本,比较简单不用关心offset, 会自动的读zookeeper中该Consumer group的last offset参考,https://cwiki.apache.org/confluence/display/KAFKA/Consumer+Gro...

2018-07-25 10:00:45 4591 1

转载 在flash builder中将flex项目导出单独的swf文件 全编译flash

在flash builder中将flex项目导出单独的swf文件flash builder单独的swf文件flex项目    1、 在flash builder中的flex项目中,右击选择“属性”   2、选择左侧的“Flex构建路径”-&gt;"库路径(L)"   3、“组件集”选择Mx+spark(K)   4、“框架链接”选择“合并到代码中”  (即界面第二行中下拉框,默认值为:使...

2018-07-25 09:53:14 2358

转载 教你如何查看识别hadoop是32位还是64位

1.从哪些地方可以识别hadoop是32位还是64位?2.hadoop本地库在什么位置? 本文链接:http://www.aboutyun.com/thread-12796-1-1.htmlhadoop在安装的时候,我们需要知道hadoop版本是32位还是64位。hadoop官网本来提供的都是32位,因为我们大部分都是64位,所以不得不编译。后来官网从hadoop2.5版本开始就提...

2018-07-24 15:05:07 2698

转载 Flume直接到SparkStreaming的两种方式

一般是flume-&gt;kafka-&gt;SparkStreaming,如果非要从Flume直接将数据输送到SparkStreaming里面有两种方式,如下:第一种:Push推送的方式程序如下:package cn.lijieimport org.apache.log4j.Levelimport org.apache.spark.streaming.flume.FlumeUt...

2018-07-21 11:32:50 1315 2

转载 Redis的搭建和Redis的集群搭建

1、Redis的官网:https://redis.io/      Redis的测试网站:http://try.redis.io/2、参考博客:https://www.cnblogs.com/mafly/p/redis_cluster.htmlhttp://blog.mayongfa.cn/258.html3、Centos操作系统中Redis的安装:开始使用的hadoop用户和自...

2018-07-19 10:09:26 228

转载 查看hdfs的fsimage和editlog

(一)名称解释fsimage,namenode的元数据镜像文件,保存在磁盘editlog,namenode操作日志fstime,最近一次的checkpoint时间metadata,一个文件存储在哪些DataNode节点的哪些位置的元数据信息NN,namenodeSNN,secondarynamenode Namenode主要维护两个文件,一个是fsimage,一个是...

2018-07-18 10:43:56 3490 1

原创 SSH无密登录配置

无密钥配置 1.生成公钥和私钥:$ ssh-keygen -t rsa然后敲(三个回车),就会生成两个文件id_rsa(私钥)、id_rsa.pub(公钥)2.将公钥拷贝到要免密登录的目标机器上$ ssh-copy-id hostname*3.ssh文件夹下(~/.ssh)的文件功能解释       (1)known_hosts :记录ssh访问过计算机的公钥(pu...

2018-07-17 16:29:41 108

转载 Hadoop cdh版本搭建

cdh版本下载地址本例下载的是hadoop-2.5.0-cdh5.3.6.tar.gz解压修改Hadoop配置重启Hadoop集群

2018-07-16 10:22:43 7563 3

转载 java中addShutdownHook钩子程序用途

通过我们的程序中运行完之后都会进行一些清理工作,比如关闭数据库资源,同步等操作。这时我们的钩子函数addShutdownHook有了用武之地。1.钩子程序执行时机:当程序正常退出,系统调用 System.exit方法或虚拟机被关闭时才会执行添加的shutdownHook线程。其中shutdownHook是一个已初始化但并不有启动的线程,当jvm关闭的时候,会执行系统中已经设置的所有通过方法addS...

2018-07-12 22:28:11 213

转载 Spark编程之基本的RDD算子之join,rightOuterJoin, leftOuterJoin

1) joindef join[W](other: RDD[(K, W)]): RDD[(K, (V, W))]def join[W](other: RDD[(K, W)], numPartitions: Int): RDD[(K, (V, W))]def join[W](other: RDD[(K, W)], partitioner: Partitioner): RDD[(K, (V, W)...

2018-06-28 15:53:34 302

转载 HDFS客户端的权限错误:Permission denied

搭建了一个Hadoop的环境,Hadoop集群环境部署在几个Linux服务器上,现在想使用windows上的Java客户端来操作集群中的HDFS文件,但是在客户端运行时出现了如下的认证错误,被折磨了几天,问题终得以解决。以此文记录问题的解决过程。(如果想看最终解决问题的方法拉到最后,如果想看我的问题解决思路请从上向下看)问题描述上传文件的代码:private static void uploadT...

2018-06-27 08:51:01 3305

转载 scala - 从合并两个Map说开去 - foldLeft 和 foldRight 还有模式匹配

开发中遇到需求:合并两个Map集合对象(将两个对应KEY的值累加)先说解决方案:( map1 /: map2 ) { case (map, (k,v)) =&gt; map + ( k -&gt; (v + map.getOrElse(k, 0)) ) } 这特么什么鬼  (╯‵□′)╯""┻━┻☆))&gt;○&lt;) 。。。。。。莫急,且听我慢慢道来。。。。。。。。。首先:Scala中现有的...

2018-06-26 21:48:12 471

原创 Storm常用API

API简介Component组件1)基本接口       (1)IComponent接口       (2)ISpout接口       (3)IRichSpout接口       (4)IStateSpout接口       (5)IRichStateSpout接口       (6)IBolt接口       (7)IRichBolt接口       (8)IBasicBolt接口2)基本抽象...

2018-06-24 19:58:02 2685

原创 Storm集群搭建

环境准备hadoop102                               hadoop103                        hadoop104zk                                              zk                                       zkstorm                  ...

2018-06-24 19:48:24 258

原创 Storm概述

1.1 离线计算是什么?离线计算:批量获取数据、批量传输数据、周期性批量计算数据、数据展示代表技术:Sqoop批量导入数据、HDFS批量存储数据、MapReduce批量计算数据、Hive批量计算数据1.2 流式计算是什么流式计算:数据实时产生、数据实时传输、数据实时计算、实时展示代表技术:Flume实时获取数据、Kafka实时数据存储、Storm/JStorm实时数据计算、Redis实时结果缓存、...

2018-06-24 19:38:13 250

原创 Elasticsearch集群部署

单节点配置信息参考:https://blog.csdn.net/liangzelei/article/details/80772066主需要修改如下内容即可实现集群部署:elasticsearch.yml# ======================== Elasticsearch Configuration =========================## NOTE: Elastic...

2018-06-23 16:19:40 121

原创 Elasticsearch相关API操作

操作环境准备pom文件内容:&lt;dependencies&gt; &lt;dependency&gt; &lt;groupId&gt;junit&lt;/groupId&gt; &lt;artifactId&gt;junit&lt;/artifactId&gt; &lt;version&gt;3.8.1&lt;/version&gt; &lt

2018-06-23 16:06:36 10081

转载 ES继承IK中文分词工具

如何集成IK分词工具   总的流程如下:第一步:下载es的IK插件https://github.com/medcl/elasticsearch-analysis-ik/tree/2.x第二步:使用maven对下载的es-ik源码进行编译(mvn clean package -DskipTests)第三步:把编译后的target/releases下的elasticsearch-analysis-ik...

2018-06-23 11:42:09 1666

原创 ElasticSearch官方默认的分词插件

elasticsearch官方默认的分词插件,对中文分词效果不理想。  比如,我现在,拿个具体实例来展现下,验证为什么,es官网提供的分词插件对中文分词而言,效果差。总结     如果直接使用Elasticsearch的朋友在处理中文内容的搜索时,肯定会遇到很尴尬的问题——中文词语被分成了一个一个的汉字,当用Kibana作图的时候,按照term来分组,结果一个汉字被分成了一组。     这是因为使...

2018-06-23 11:35:43 2456

转载 Elasticsearch5 安装教程

最近学习Elasticsearch,顺便记录下操作步骤,供日后参考安装环境 CentOS release 6.61、因Elasticsearch是基于java写的,所以它的运行环境中需要java的支持,在Linux下执行命令:java -version,检查Jar包是否安装安装java版本至少是1.8以上2、首先准备下载Elasticsearch5.5.2 安装包wget https://arti...

2018-06-22 12:21:02 385

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除