ღ

原创 rmdir：无效选项 -- r 请尝试执行“rmdir --help“来获取更多信息。

rmdir：无效选项 -- r 请尝试执行"rmdir --help"来获取更多信息。rmdir：无效选项 -- r 请尝试执行"rmdir --help"来获取更多信息。1.rmdir2.rmrmdir：无效选项 – r 请尝试执行"rmdir --help"来获取更多信息。1.rmdirrmdir命令是删除空目录的命令，rmdir 目录名2.rmrm命令才是删除非空目录的命令,rm -rf 目录名

转载 IDEA(2018版)快捷键整理

参考链接

原创 Kafka通过脚本群启动和关闭

我的这两个脚本文件的路径是：/opt/module/kafka/toolsvim start-kafka.sh#! /bin/shfor host in hadoop101 hadoop102 hadoop103do ssh $host "source /etc/profile;nohup /opt/module/kafka/bin/kafka-server-star...

原创 Linux安装nc,以及通过SparkStreming实时统计单词的个数

Linux中有一个级强大的网络工具netcat，在默认情况下面都是没有安装的，现在介绍一下安装过程切换到root用户：yum install -y nc测试使用在一个终端上 输入 nc -lk 9999然后可以输入数据package day15import org.apache.spark.streaming.dstream.{DStream, Receiv...

原创 Linux中快速拖拽小文件,安装rz ,sz

原创 Spark跟hive整合之后,启动spark shell失败的解决办法

Spark跟hive整合之后,启动spark shell失败解决方法:向spark安装目录下的jars目录里拷贝mysql的jar包mysql-connector-java-5.1.27-bin.jar想给大家上传jar包,但是一直提交不了,没有上传过资料,也不知道为什么???,[root@hadoop101 bin]# ./spark-shellUsing Spark's...

原创 IDEA中如何快速生成返回值

当我们新创建了一个对象,或者不知道该返回什么类型,这时我们可以让系统自动帮我们生成快捷键Ctrl+Alt+V

原创 notepad++如何连接上Linux系统对文件进行编辑?

1.将连接的窗口显示出来2.点击设置的profile settings

转载 Xshell vim使用右侧数字键盘时数字变成英文字母的解决办法

https://blog.csdn.net/weixin_38890593/article/details/90232428

原创 @Override is not allowed when implementing interface method

@Override从jdk1.5开始出现的，是用来标注方法重写；通常方法重写发生在继承父类，重写父类方法，或者实现接口，实现接口方法；@Override能够保证你正确重写方法，当重写方法出错时（方法名误写、漏掉参数）编译器会提示编译错误1.问题出在idea得jdk版本低于1.5 ：File → Project Structure → Modules 把JDK版本改成大于1.5就可...

原创 Hue与MySQL集成之后查询表中的数据出现中文乱码

解决方案在 Hue的安装目录下的desktop/conf/hue.ini文件中添加## options={}options={ "init_command":"SET NAMES 'utf8'"}重启Hue即可

原创 在hue的hive中创建表出现错误:Error while processing statement: FAILED: Execution Error, return code 1 from org.

点击执行报错解决方案:hadoop fs -chmod o+w /user/hive/warehouse修改之后刷新即可看到新建的表

原创 无法执行操作。 Note: you are a Hue admin but not a HDFS superuser, "root" or part of HDFS supergroup, "supe

Hue和hdfs集成之后,在hue中hdfs的user目录下创建目录报错:无法执行操作。 Note: you are a Hue admin but not a HDFS superuser, "root" or part of HDFS supergroup, "supergroup".AccessControlException: Permission denied: user=myh...

原创 yarn节点不存活:1/1 local-dirs are bad: /opt/module/hadoop-2.7.2/data/tmp/nm-local-dir; 1/1

问题:yarn的三个节点只活跃两个主要原因是因为磁盘不足:需要清理磁盘空间通过df -h 命令查看磁盘占用情况再深入查找想这样根目录占用比较多,再输入du -s -h /*查找根目录下的使用情况du -s -h /opt/*du -s -h /opt/module/*像这样一层一层的查找,有的是产生大量的日志文件,可以进行删除没用的日...

原创 Kettle进行数据转换是出现乱码

需求分析:将A表的数据复制到B问题描述:在字段选择里面设置了每个字段的编码格式为UTF-8,但B表中名字的字段还是出现了乱码解决方法:将原表和目标表都设置为utf8编码格式,保存将数据库中表B的数据首先删除完,然后再在kettle工具中启动即可...

原创 eclipse中编写MapReduce报错Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop

log4j:WARN No appenders could be found for logger (org.apache.hadoop.metrics2.lib.MutableMetricsFactory).log4j:WARN Please initialize the log4j system properly.log4j:WARN See http://logging.apac...

原创 虚拟机连接不上网络

1.首先查看一下vmware的那五个服务是否都处于正在运行的状态并处于自启动的状态2.在控制面板的网络里面点击更改网络适配器看一下vmware的那两个网卡是否都存在如果是以上两种情况都正常,现在终端中输入service network restart重启一下网络如果是失败,继续输入service NetworkManager restart,一般这样就可以连上网,如果不...

原创 eclipse中添加泛型出现''尖括号''operator is not allowed for source level below 1.7的解决方法

问题描述:泛型是出现在1.7之后,而我们创建的项目默认的jre是1.5,不支持泛型,所以报错解决方法:将jre更改为1.8即可最后点击apply和Ok 就解决了这个问题....

原创 vmware中的VMware DHCP Service和VMware NAT Service两个服务消失不见

问题描述：本来vmware以及虚拟机都可以正常使用,因为当时我的软件管家下载不了软件,网上搜的说用一下360急救系统（类似这种系统急救什么的一定一定慎用！！！）急救一下就好了,然后我就点了急救,然而然而,软件管家还是不能够下载东西,而且系统急救还把我的Vmware上的VMware DHCP Service和VMware NAT Service这两个服务给杀死消失不见了,不是无法启动，是在任务管...

原创 HBase存储机制

2.1Hadoop的限制Hadoop只能执行批量处理,并且只能以顺序的方式访问数据，导致随机访问的效率较低。2.2HBase的存储机制HBase可以存储海量数据，并且以随机方式访问数据。HBase是一个分布式的面向列的数据库，在表中由行进行排序。在创建表的时候就指定列族，定义列的时候以列族：列名键值对的形式定义。一个表有多个列族，每个列族可以有任意数量的列。后续列的值连续地存储在磁...

原创 初识HBase

1.1HBase概念HBase是一个分布式（有角色，搭建集群）的面向列的数据库。面向行:面向行的特点是,即是某一行的某一列没有存储数据,那么这一列也会占用空间,另外在磁盘的存储上,每一行的各个列的数据也都是顺序存储在一起的。面向列：每一行的数据可以有不同的列，有多少列就占用多少存储空间，没有的列就不占用存储空间。在磁盘的存储上，是以列族存储的。HBase与hive的比较hive...

原创 数据仓库

1.1数据仓库概念学习Hive之前,我们需要理解一个概念——数据仓库数据仓库(Data Warehouse)可以简称为DW或者DWH,它是一个支持管理决策的数据集合。数据是面向主题的，集成的,不易丢失的并且是时变的。1.2数据仓库的特点面向主题:数据仓库都是基于某个明确的主题,比如关于订单的,关于商品的等,它里面只存储与该主题相关的数据,其他与该主题无关的数据都不会进行存储.集...

原创 在Vmware中开启已挂起的CentOs虚拟机，弹出内部错误窗口

这时去任务管理器里面查看关于Vmware的那5个服务是否处于正在运行或者启动中点的状态，并设置为开机自启动，防止被其他第三方软件拦截。设置完之后再去Vmware中开启虚拟机即可。...

原创 第三阶段第二周考试题

第三阶段第二周考试题1.谈谈对Spring的IoC/DI的理解我的答案:(满分10分,得分10分)IOC:是反转控制,或者控制反转的意思,正控的话就是自己创建所需要的对象,而反转控制,就是把创建对象交给Spring容器来创建,像那些共同的代码,例如事务处理,日志文件等也交给Spring容器管理,这样既降低了代码的耦合度,也简化开发,提高代码的复用性.DI:依赖注入的意思,我们可以通...

原创 第一周考试题整理

第一周考试题Mybatis常用的动态SQL的标签有哪些?我的答案:(满分10分,得分10分)<where><if></if><where><where><when></when><otherwise></otherwise><where>...

原创 mybatis中#{}与${}的区别

#{}：会把参数的位置使用"?"当做占位符，当执行SQL语句的时候才会替换？的值，相当于JDBC中的PreparedStatement自带引号例如：和数据库进行交互，使用#{}<insert id="insertEmployee" parameterType="employee" >insert into employee (name,age,birthday,sa...

原创 《IDEA如何修改注释颜色》

editor-->colorsAndFonts-->languagesDefaults

原创 IDEA创建Java Maven项目，通过Mybatis中Mapper接口—————对数据库进行增删改查

需求：使用Mapper接口对数据库中的表进行CRUD项目结构target是项目编译之后生成的1.在数据库中创建表CREATE TABLE employee( id INT(11) PRIMARY KEY auto_increment, name VARCHAR(30), age INT(11), birthday date, s...

原创 IDEA自定义文件模板

在setting--->Editor--->File and Code Templates中点击"+"配置模板在项目创建需要的文件

原创 使用IDEA创建Maven JAVA项目,使用Dao层,对数据库中的表进行增删改查

题目需求：使用IDEA 创建 MAVEN JAVA 项目根据下图 在mysql数据库中创建员工表(T_Employee)创建实体类 Employee 并创建DAO 层(使用JDBC技术)以及测试类 对创建的DAO实现类进行增删改查进行测试项目结构1.在数据库中创建表(我使用的Navicat)CREATE TABLE eee( id INT(11) ...

原创 Mybatis不使用Mapper接口——————对数据库中的表进行增删改查

数据库员工表：employeeint varchar int date decimal项目目录结构1.实体类package com.ujiuye.bean;import lombok.*;import java.math.BigDecimal;import java.util.Date;@...

原创 Mybatis获取SqlSession的工具类

package com.ujiuye.utils;import org.apache.ibatis.io.Resources;import org.apache.ibatis.session.SqlSession;import org.apache.ibatis.session.SqlSessionFactory;import org.apache.ibatis.session.SqlS...

原创 《Maven项目添加依赖详解》

当我们需要么某个jar包时，我们要在项目的pom.xml文件中添加该jar包的依赖，所有依赖都写在<dependencies></dependencies>中，每个依赖又分别写在<dependency></dependency>标签中，每个<dependency></dependency>标签中对应一个jar文件，需要填写ja...

原创 Maven仓库的分类和配置

1.Maven仓库的分类Maven仓库可以分为本地仓库和远程仓库两类1.1【本地仓库】本地仓库相当于一个缓存，在电脑上是一个文件夹，我们可以设置这个文件夹的路径（具体怎么设置会在下面的配置体现）,工程第一次需要某种jar包时，会从远程仓库（互联网）下载并保存到本地仓库中（在程序员的电脑上），当第二次使用时，不需要去远程仓库下载，会先去本地仓库中找，如果找不到才会去远程仓库上下载。1...

原创 《Mybatis实现数据库多表查询》——————多对一

1.准备工作1.1数据库准备在数据库中建立员工表（t_emp）和部门表(t_dept)Idea准备项目目录结构1.2.1pom.xml<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0" xml...

原创 使用eclipse关联 maven 创建 java项目 。 完成 单例模式的开发与测试

作业使用eclipse关联 maven 创建 java项目 。完成 单例模式的开发与测试 packagecom.ujiuye.homework; publicclassA { privatestaticA a= newA(); // 直接创建对象——饿汉式 privateA(){ // 私有构造方法 }...

原创 java 单例模式5种写法

java 单例模式5种写法学习整理饱汉模式(懒汉模式) 1 // 饱汉 2 // UnThreadSafe 3 public class Singleton1 { 4 private static Singleton1 singleton = null; 5 private Singleton1() { 6 } 7 public static Sing...

原创 《Maven的依赖范围》

Maven的依赖范围依赖：项目需要依靠一个jar依赖范围：依赖一个jar，并不一定是在项目整个生命周期都需要它，可能只是在某一个阶段需要，那么依赖范围就是在定义在哪些阶段依赖这个jarA依赖B，需要在A的pom.xml文件中添加B的坐标，大家注意到我们之前添加坐标时还有写了一个scope ，这是依赖的范围。scope有几个可选值， 如：1.compile:默认值，表示编译依赖范...

原创 使用Maven骨架创建出的项目结构的注意事项

使用骨架创建出的项目结构,都是不是标准的Maven目录结构,需要添加缺失的文件出现.java文件丢失,只能在磁盘下创建java文件夹解决完这个问题在WEB-INF下的index.jsp文件还是报错,有两种解决方案:一是在pom.xml文件中添加Servlet-api的依赖(jar包)二是把后缀.jsp改为.html...

原创 关于Maven项目build时出现No compiler is provided in this environment的处理

关于Maven项目build时出现No compiler is provided in this environment的处理[ERROR] No compiler is provided in thisenvironment. Perhaps you are running on a JRE rather than a JDK?步骤:Eclipse-->Window-->p...