3 qq_36039236

尚未进行身份认证

暂无相关简介

等级
TA的排名 34w+

MapReduce二次排序

 默认情况下,Map输出的结果会对Key进行默认的排序,但是有时候需要对Key排序的同时还需要对Value进行排序,这时候就要用到二次排序了。下面我们来说说二次排序1、二次排序原理 我们把二次排序分为以下几个阶段  Map起始阶段  在Map阶段,使用job.setInputFormatClass()定义的InputFormat,将输入的数据集分割成小数据块split,同时InputForm...

2018-04-22 17:10:16

hadoop的mapreduce执行

map任务的输出阶段,输出的内容可能会被分了好几个区,执行shuffle阶段的时候,由于每个map任务的完成时间可能不同,当只有一个map任务完成,reduce任务就开始复制其输出,这就是shuffle的copy阶段,对应的map任务和reduce任务只复制,sort同一个分区map的数据。从shuffle的过程可以看出,map任务处理的是一个inputsplit,而reduce任务处理的是所有m...

2018-04-22 12:27:30

Hadoop:HDFS数据存储与切分

Hadoop入门教程:HDFS数据存储与切分,在Hadoop中数据的存储是由HDFS负责的,HDFS是Hadoop分布式计算的存储基石,Hadoop的分布式文件系统和其他分布式文件系统有很多类似的特质。那么HDFS相比于其他的文件系统有什么特征呢?简单总结有如下的基本特征:对于整个集群有单一的命名空间。数据一致性。适合一次写入多次读取的模型,客户端在文件没有被成功创建之前无法看到文件存在。(Dat...

2018-04-22 11:55:54

SpringMVC 跳转到不同的jsp文件目录

SpringMVC的Controller方法通过返回view,然后结合viewResolver,最终跳转到指定目录的jsp。如果想在Controller的业务方法中跳转到不同的目录,例如跳转到dept中hello.jsp中。本文主要介绍SpringMVC在Controller的业务方法中如何跳转到不同的jsp目录。原理:在Controller的业务方法中指定"跳转的目录"+“目标JSP名称”。we...

2018-02-09 16:52:20

springmvc前台数据展示

后端Controller通过modelAndView发送List数据,后台接收List类型数据进行展示(支持级联属性):注意使用前导入jstl标签库:如果通过Map进行传输数据:

2018-02-09 15:12:06

ssm整合出现org.apache.ibatis.binding.BindingException: Invalid bound statement (not found)错误

ssm整合过程中采用了mybatis的逆向工程,由于mybatis逆向工程生成的代码的路径是指定好的,所以使用的时候,只要拿来用就可以了,不可复制文件,重新更改mapper映射文件以及生成的bean的包名,否则就会出现上述的错误。出现上述错误的原因就是在接口中没有找到接口的实现方法。也就是配置接口与mapper映射文件的关联时,出现了错误。具体的解决办法就是判断配置是否出错,配置文件中设置的路径是...

2018-02-08 22:17:32

spring4.0第四天

AOP前奏WHY AOP?需求1-日志:在程序执行期间追踪正在发生的活动需求2-验证:希望计算器只能处理正数的运算用AspectJ注解声明切面•要在Spring中声明AspectJ切面,只需要在IOC容器中将切面声明为Bean实例.当在SpringIOC容器中初始化AspectJ切面之后,SpringIOC容器就会为那些与

2018-02-06 20:20:40

spring4.0常用标签的作用

1、@controller控制器(注入服务)用于标注控制层,相当于struts中的action层2、@service服务(注入dao)用于标注服务层,主要用来进行业务的逻辑处理3、@repository(实现dao访问)用于标注数据访问层,也可以说用于标注数据访问组件,即DAO组件.4、@component(把普通pojo实例化到spring容

2018-02-06 18:14:06

spring4.0新特性,泛型依赖注入

•Spring4.x中可以为子类注入子类对应的泛型类型的成员变量的引用例子:创建一个父类Repostory:packagecom.zyh.spring.fanxing;publicclassBaseRepostory{}创建一个父类Service:publicclassBaseService{@Autowiredprotec

2018-02-06 17:03:29

spring4.0第三天

在classpath中扫描组件•组件扫描(componentscanning): Spring能够从classpath下自动扫描,侦测和实例化具有特定注解的组件.•特定组件包括:–@Component:基本注解,标识了一个受Spring管理的组件–@Respository:标识持久层组件–@Service:标识服务层(业务层)组件–@Controller

2018-02-03 23:18:48

spring4.0第二天

通过调用静态工厂方法创建Bean•调用静态工厂方法创建Bean是将对象创建的过程封装到静态方法中.当客户端需要对象时,只需要简单地调用静态方法,而不同关心创建对象的细节.•要声明通过静态方法创建的Bean,需要在Bean的class属性里指定拥有该工厂的方法的类,同时在factory-method属性里指定工厂方法的名称.最后,使用元素为该方法传递方法参数

2018-02-03 22:54:51

spring4.0第一天

spring配置文件命名空间:xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"xmlns:util="http://www.springframework.org/schema/util"xmlns:context="http://www.springframework.org/schema/context"xml

2018-02-03 22:30:17

淘淘商城首页商品类目展示

lib-v1.js里面使用ajax加载json数据文件,并调用方法处理json数据1209行

2018-02-02 13:17:09

淘淘商城(请求数据-注意事项)

在浏览器访问http://localhost:8081/item/830972的时候,如果出现一直转圈圈没有访问结果。原因可能是jdbc.properties里面username或者password的值后存在空格,把空格删除重启试试。

2018-01-25 17:38:19

淘淘商城(常见问题-注意事项)

dubbo在eclipse中无法读取到dubbo.xsd下载一个dubbo.xsd文件windows->preferrence->xml->xmlcatalogadd->catalogentry->filesystem选择刚刚下载的文件路径修改key值和配置文件的http://code.alibabatech.com/schema/dubbo/dubbo.x

2018-01-25 16:33:23
勋章 我的勋章
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!