1 zzzzzz__yy

尚未进行身份认证

我要认证

暂无相关简介

等级
TA的排名 23w+

大数据技术之Hive

大数据技术之Hive一、Hive基本概念二、Hive 基本Shell操作三、Hive 初次启动ERROR解决一、Hive基本概念1、什么是HiveHive:由Facebook开源用于解决海量结构化日志的数据统计。Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。本质是:将HQL转化成MapReduce程序1)Hive处理的数据存储在HDFS2)Hive分析数据底层的实现是MapReduce3)执行程序运行在YARN上2、为什么使用Hi

2020-09-16 21:24:41

大数据技术之Zookeeper

大数据技术之Zookeeper一、zookeeper特点二、zookeeper单机模式三、zookeeper 常用命令四、查看zookeeper 状态的几种方式一、zookeeper特点Zookeeper=文件系统+通知机制1、Zookeeper:一个领导者(leader),多个跟随者(follower)组成的集群。2、Leader负责进行投票的发起和决议,更新系统状态3、Follower用于接收客户请求并向客户端返回结果,在选举Leader过程中参与投票4、集群中只要有半数以上节点存活,Zoo

2020-09-16 20:24:04

大数据技术之Hadoop(HDFS文件系统 API操作HDFS)

API操作HDFS一、HDFS获取文件系统二、HDFS文件上传三、HDFS文件下载四、HDFS目录创建五、HDFS文件夹 和文件 删除六、HDFS文件名更改七、HDFS文件详情查看八、HDFS文件和文件夹判断一、HDFS获取文件系统方法一import static org.junit.Assert.*; import java.net.URI; import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Bloc

2020-09-15 09:17:05

大数据技术之Hadoop(HDFS文件系统 客户端操作 环境)

这里写目录标题 客户端操作一、环境准备与测试1、jar包准备2、配置HADOOP_HOME环境变量3、检查hadoop 是否配置成功二、创建一个java工程一、环境准备与测试1、jar包准备1)解压win7下编译过的hadoop-2.8.2.tar.gz到非中文目录2)进入share文件夹,查找所有jar包,并把jar包拷贝到_lib文件夹下3)在全部jar包中查找sources.jar,并剪切到_source文件夹。4)在全部jar包中查找tests.jar,并剪切到_test文件夹。2、

2020-09-11 17:42:48

大数据技术之Hadoop(HDFS文件系统 命令行操作)

HDFS文件系统一、HDFS概念二、HFDS命令行操作1、基本语法2、HDFS参数大全3、HDFS常用命令实操一、HDFS概念HDFS,它是一个文件系统,用于存储文件,通过目录树来定位文件;其次,它是分布式的,由很多服务器联合起来实现其功能,集群中的服务器有各自的角色。HDFS的设计适合一次写入,多次读出的场景,且不支持文件的修改。适合用来做数据分析,并不适合用来做网盘应用。组成:1)HDFS集群包括,NameNode和DataNode以及Secondary Namenode。2)NameNo

2020-09-10 20:31:20

Hadoop启动停止方式

Hadoop启动停止方式一、各个服务组件逐一启动二、各个模块分开启动(配置ssh是前提)常用三、全部启动(不建议使用)一、各个服务组件逐一启动(1)分别启动hdfs组件hadoop-daemon.sh start|stop namenode|datanode|secondarynamenode(2)启动yarnyarn-daemon.sh start|stop resourcemanager|nodemanager二、各个模块分开启动(配置ssh是前提)常用(1)整体启动/停止hd

2020-09-08 16:10:00

Hadoop的安装,环境变量的配置

Hadoop 安装一、进入到Hadoop安装包路径下二、解压安装文件到/opt/module下面三、查看是否解压成功四、将hadoop添加到环境变量一、进入到Hadoop安装包路径下[victor@node1 ~]$ cd /opt/software/[victor@node1 software]$ pwd/opt/software二、解压安装文件到/opt/module下面[victor@node1 software]$ tar -xzvf hadoop-2.8.2.tar.gz -C /o

2020-09-08 15:47:33

Linux 学习笔记01 Linux和window 网络问题,安装centos系统报异常,关机的三种方式,Linux 安装 jdk几种方式

Linux和window 网络问题,安装centos系统报异常,关机的三种方式,Linux 安装 jdk几种方式一、Linux和window 网络问题二、安装centos系统报异常三、关机的几种方式四、Linux 安装 jdk几种方式一、Linux和window 网络问题1)打开window 网络和共享中心 -> 更改适配器设置-> 查看有没有vmnet8虚拟网卡2)window + R -> cmd -> ipconfig3)xshell 客户端连接二、安装centos系

2020-09-02 20:45:13

Java EE 学习笔记04 Eclipse安装SVM的四种方式,Maven

SVN客户端、服务端的安装和使用一、二、三、一、二、三、

2020-08-21 22:40:48

JavaEE 学习笔记 03 SpringMVC

SpringMVC一、SpringMVC框架特点二、MVC设计模式三、MVC 优缺点四、Spring MVC框架搭建步骤五、参数传递一、SpringMVC框架特点1、清晰地角色划分。2、灵活的配置功能。3、提供了大量的控制器接口和实现类。4、真正做到与View层的实现无关(JSP、Velocity、Xslt等)。5、国际化支持。6、面向接口编程。7、Spring提供了Web应用开发的一整套流程,不仅仅是MVC,他们之间可以很方便的结合一起。二、MVC设计模式模型(Model)-对应组件:

2020-08-19 21:01:54

JavaEE 学习笔记 02 AOP、Spring注解实现自动注入

AOP、Spring注解实现自动注入一、面向切面编程(AOP)1、什么是AOP2、AOP相关术语3、示例:使用AOP实现日志功能4、总结二、Spring注解实现自动注入1、使用注解实现IOC2、使用注解实现AOP一、面向切面编程(AOP)1、什么是AOPAOP的目标: 让我们可以“专心做事”AOP的原理:1、将复杂的需求分解出不同方面,将散布在系统中的公共功能集中解决。2、采用代理机制组装起来运行,在不改变原程序的基础上对代码段进行增强处理,增加新的功能。通过动态代理实现AOP(采用动态代理

2020-08-18 18:58:00

JavaEE 学习笔记 01 MVC、Spring、控制反转

Spring一、SSM简介二、MVC设计概述MVC 模型:MVC原理图:三、Spring1、Spring的两大核心2、Spring的主要内容3、Spring的体系结构4、Spring核心技术5、Spring的优点一、SSM简介SSM框架,是Spring + Spring MVC + MyBatis的缩写,Spring依赖注入DI来管理各层的组件,使用面向切面编程AOP管理事物、日志、权限等。SpringMVC代表了Model(模型)View(视图)Controller(控制)接收外部请求,进行分发和处理

2020-08-17 20:28:57

Java Web 学习笔记 11 JDBC

JDBC一、概念二、好处三、JDBC的使用步骤四、JDBC 的简单使用加载驱动的两种方式一、概念JDBC(Java Database Connectivity) java应用程序和数据库的连接技术JDBC是sun公司推出的一套用于访问不同数据库的规范或标准(一组接口或抽象类)、java.sql.*二、好处1、开发人员不用记多套APi,减轻了开发压力2、维护性提高三、JDBC的使用步骤1、加载驱动(加载MySQL驱动)将MySQL提供的一套连接的实现类加载到应用程序中2、获取连接3、访问

2020-08-13 21:56:24

Java Web 学习笔记 10 HTTP协议、session、Bootstrap框架

HTTP协议、session、Bootstrap框架一、HTTP协议二、session1、Session 概述2、Session的工作机制3、Session的时效管理4、项目阶段一、Bootstrap框架及其使用一、HTTP协议1)HTTP 是什么 ?HTTP超文本传输协议 (HTTP-Hyper text transfer protocol),是一个属于应用层的面向对象的协议。它于1990年提出,经过几年的使用与发展,得到不断地完善和扩展。它定义了浏览器和服务器之间进行数据交换时的数据格式:请求和响

2020-08-12 21:29:24

Java Web 学习笔记09 JSP

JSPJSP1、JSP 概述2、code3、Servlet 传参数到jsp页面4、jsp 获取Servlet 传递过来的值5、jsp页面写css代码6、jsp页面写js代码7、jsp页面写JSTL语法JSP1、JSP 概述1、为什么要有JSPServlet可以通过转发或重定向跳转到某个HTML文档。但HTML文档中的内容不受Servlet的控制。比如登录失败时,跳转回登录表单页面无法显示诸如“用户名或密码不正确”的错误消息,所以我们目前采用的办法是跳转到一个错误信息页面。如果通过Servlet逐行输

2020-08-12 20:19:44

Java Web 学习笔记 08 web项目导入eclipse出错问题和插件的安装

项目导入eclipse出错问题和插件的安装一、解决项目导入eclipse出错问题1、导入项目2、解决错误二、插件的安装一、解决项目导入eclipse出错问题1、导入项目选择import:选择要导入项目的目录:copy到工作空间,不改变原来项目导入项目出错2、解决错误项目右击,选择Build Path—>Configure…项目右击,选择Properties选择如下:特别的,如果没有,如下所示,点击Add Library…只剩项目上出现红叉1、以上有s

2020-08-10 21:41:42

Java Web 学习笔记 07 Maven的下载安装及配置,创建Maven项目

Maven的下载安装及配置,创建Maven项目一、Maven的下载安装及配置二、在eclipse使用maven三、创建Maven项目四、修改项目中的错误一、Maven的下载安装及配置解压即安装新建文件夹m2,打开conf,复制settings.xml到m2修改m2中的settings.xml,添加以下内容二、在eclipse使用maven三、创建Maven项目创建的项目出错:四、修改项目中的错误解决项目出错增加缺少的文件maven项目创建成功

2020-08-10 20:45:10

Java Web 学习笔记 06 Servlet 案例(get、post,转发与重定向)

Servlet 案例案例一案例二案例三案例一(1)LoginServlet:package com.alex.web.servlet;import java.io.IOException;import javax.servlet.Servlet;import javax.servlet.ServletConfig;import javax.servlet.ServletException;import javax.servlet.ServletRequest;import javax.se

2020-08-09 20:44:36

Java Web 学习笔记 05 HBuilder快捷键

HBuilder快捷键

2020-08-09 14:25:15

Java Web 学习笔记 04 JavaScript

JavaScript一、JavaScript概述1、为什么使用JavaScript2、JavaScript是什么二、HelloWorld案例三、Java Script 基本语法案例1、变量2、函数3、函数是对象4、回调函数5、this关键字6、Object四、五、一、JavaScript概述1、为什么使用JavaScript拨号上网Time:网速很慢,数据提交到服务器端验证,体验很差,JavaScript横空出世,担当了浏览器端数据验证的重任,从此一发不可收拾五彩缤纷的现在:时至今日JavaScri

2020-08-08 23:07:50

查看更多

勋章 我的勋章
  • 签到新秀
    签到新秀
    累计签到获取,不积跬步,无以至千里,继续坚持!
  • 阅读者勋章Lv2
    阅读者勋章Lv2
    授予在CSDN APP累计阅读博文达到7天的你,是你的坚持与努力,使你超越了昨天的自己。
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!
  • 勤写标兵Lv4
    勤写标兵Lv4
    授予每个自然周发布9篇以上(包括9篇)原创IT博文的用户。本勋章将于次周周三上午根据用户上周的博文发布情况由系统自动颁发。