3 ljh_15821

尚未进行身份认证

逢山开路,遇水搭桥!

等级
TA的排名 31w+

csdn_export_md

集成maven的相关插件:<plugins> <plugin> <groupId>org.apache.maven.plugins</groupId> <artifactId>maven-compiler-plugin</artifactId> <...

2020-01-10 11:26:38

Structured Streaming

Structured StreamingStructured Streaming是什么Structured Streaming是一个scalable和fault-tolerant的流处理引擎(泛指使用SQL操作Spark的流处理)该引擎构建在Spark SQL之上,使得用户可以用静态批处理的方式去处理流计算任务。Structured Streaming底层弃用Spark SQL引擎对流数据做增...

2019-10-13 19:58:53

Spark SQL

Spark SQLSpark SQL是构建在Spark RDD之上的一款ETL(Extract Transformation Load)工具,这类似于构建在MapReduce之上的1.x版本的Hive。同Spark RDD的不同之处在于Spark SQL的API可以给Spark计算引擎提供更多的信息(计算数据结构、转换算子),Spark计算引擎可以根据Spark SQL提供的信息优化底层计算任务...

2019-10-13 19:57:17

Spark DStreams

Spark DStreamsDStreams是什么DStreams是构建在Spark RDD之上的一款流处理工具,意即Spark DStreams并不是一个严格意义上的流处理,底层通过将RDD在时间轴上分解成多个小的 RDD-micro batch流 | 批处理计算类型数据量级计算延迟输入数据输出数据计算形式批处理MB=>GB=>TB几十分钟|几...

2019-10-13 19:55:31

Spark RDD

Apache Spark框架概述Apache Spark是一个快如闪电的统一的分析引擎(仅仅是一款分析引擎,不提供存储服务)快:相比较于第一代基于磁盘计算的离线分析框架MapReduce而言,Spark基于内存计算 较快统一:Spark提供统一的API访问接口,实现了批处理和流处理的统一,并且具有ETL功能同时提供对大规模数据集的全栈式解决方案:批处理、流处理、SQL、Machine L...

2019-10-13 19:53:03

Scala

Scala LanguageScala语言Scala是一门多范式的编程语言,能够以一种优雅的方式来解决现实问题,同时支持面向对象和面向函数的编程风格。虽然它是强静态类型的编程语言,但是它强大的类型推断能力,使其看起来就像是一个动态编程语言。Scala语言最终会被编译成java字节码文件,可以和JVM无缝集成,并且可以使用Scala调用Java的代码库。Scala编程语言除了自身的特性以外,目前...

2019-10-13 19:50:48

Hive

Hive1. 引言什么是Hive1. Hive是apache组织提供的一个基于Hadoop的数据仓库产品 数据库 DataBase OLTP 数据量级小 数据价值高 数据仓库 DataWarehouse OLAP 数据量级大 数据价值低2. Hive基于Hadoop 底层数据存储 HDFS 运算方式 MapR...

2019-10-13 19:47:49

Storm

Apache Storm一、概述http://storm.apache.org/Apache Storm是一款免费开源的分布式实时计算框架(流处理)Apache Storm可以非常容易并且可靠地处理无界的流数据,进行实时的分析处理Apache Storm支持多种编程语言(1.x版本Clodure 2.x版本Java重构)。适用场景:实时分析、在线机器学习、持续计算、分布式的RPC、E...

2019-10-13 19:46:54

Kafka

Kafka一、概述http://kafka.apache.org/Apache Kafka® is a distributed streaming platform——分布式的流数据平台Kafka具备三项关键能力:发布订阅记录流(Record),类似于消息队列(MQ)或者企业级消息系统存储记录流,以一种容错的持久化方式实时处理加工流数据Kafka的应用场景:构建实时的流数...

2019-10-13 19:45:06

Flume

Apache Flume一、概述http://flume.apache.org/Flume是一个分布式、可靠的、高可用的高效的日志数据收集、聚合以及传输系统,它简单和灵活的架构是基于数据流的。Flume具备强大的容错保证机制,有多种容错和恢复保证。Flume使用简单可扩展的数据模型允许开发在线分析处理应用。架构[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-...

2019-10-13 19:43:50

HBase

HBase一、概述http://hbase.apache.orgApache HBase是一个基于Hadoop的数据库,具有可靠、分布式的特点,适合结构化大数据的存储。Apache HBase是Google BigTable的开源实现,开源、分布式、数据多版本、基于列存储的非关系型数据库。HBase建立在Hadoop的HDFS的基础之上。列存储和行存储列存储和行存储指的是数据在存储介质...

2019-10-13 19:42:50

Zookeeper

Apache ZooKeeper一、概述http://zookeeper.apache.orgApache ZooKeeper是一个可靠高效的分布式应用的服务协调系统,主要解决分布式系统存在的一些通用问题,比如分布式系统的集群管理、集群选举、配置中心、统一命名服务、分布式同步(分布式锁)等问题。架构ZooKeeper关键词:一致、有头、数据树[外链图片转存失败,源站可能有防盗链机制...

2019-10-13 19:41:20

Hadoop

**Author: **李金辉Wechat:m04194514Hadoop一、概述大数据大数据(big data)是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产大数据的5V特点(IBM提出):Volume(大量)Velocity(高速)Variety(多样)V...

2019-10-13 19:39:24

外汇基本术语

搞不懂这些基本术语,怎么能交易外汇?外汇交易中会涉及到很多专业的术语,这和我们平时说话有所不同,特别是新手在接触到这些术语的时候可能会不知道是什么意思,今天就为大家整理一下外汇交易中比较常见的外汇专用术语。外汇外汇交易是以一种外币兑换成另一种外币,即买入一种货币组合中一种货币的同时卖出另一种货币的外汇交易方式。外汇市场没有具体地点,没有中心交易所,而是通过银行、企业和个人间的电子网络,展开货...

2019-05-24 12:57:43

剖析人性的弱点

从人性的弱点剖析做交易失败的原因剖析人性弱点,交易者行为和心理,从而使自己成为一个真正的赚钱交易者人性弱点:贪婪和恐惧所有交易者的心理和行为都会受到贪婪和恐惧这二个人性弱点的影响,交易的结果基本上都与自己的愿望相背离,赚钱的欲望越强烈,结果却是越赚不到钱。1.交易者的贪婪:因为贪婪,交易者才会从事高风险的杠杆品种投资。贪婪总会让人想在最短的时间内赚取最多的钱,其行为表现在总想在最顶部卖出,...

2019-05-24 12:47:56

短线王必备技巧

短线王必备的3种T+0操作技巧,解套不用愁股市中被套的股民永远都占大多数,所以解套是在股市永恒的话题。股票被套后肯定会想法解套,但解套方法那么多,到底用哪一种好呢?死扛解套?直接卖出解套?还是其他的解套方法?这要取决于个人的操作习惯以及行情走势,这里向大家介绍的解套方法是T+0解套法,希望能给大家带来一定的帮助。简单说说常用的几种t+0模式:1、受外盘或者个股利好高开,高开一般在10点之前会...

2019-05-24 12:46:31

短线操作坚持“五不碰”

一、错阴斩杀错阴斩杀,由两根大阴线组成。第二根大阴线为大幅高开又大幅低走,收盘价比第一根大阴线的收盘价还要低。如此形成两根错综连接的大阴线,K线形态如图所示。错阴斩杀,顾名思义,错综连接的两根大阴线斩杀投资者,这是股价将继续下跌的标志。很多投资者以为第一根大阴线预示着空方力量衰减,股价将见底.在第二天股价高开,并有小幅上冲的动作后,空方马上展开了无情的进攻,将多头的上涨梦击碎,股价大幅下挫,...

2019-05-24 12:45:08

波段操作精华

教你快速掌握波段操作精华,操作十拿九稳我们操作股票无非是想找到一个大牛股操作,在股票市场中,股票是有波段的,每个股票都会经历过这样的牛熊,如果我们掌握了这套波段,合理的看懂趋势波段去操作,这样既简单,有省时间。下面我将给大家讲解一下如何应用波段选股,希望能够帮助大家。资本市场的多空博弈的激烈程度无异于战场上生死的较量,保全实力选准时机集中兵力重拳出击,方能赢得战机。利润最大化永远是投资者参与市...

2019-05-24 12:42:57

TK线技术分析

如何通过技术分析提前判断K线假突破?技术分析只是一种分析方法,和其他任何分析方法一样,都无法预先知道,未来市场会怎么走,如果可以预先知道这个是假突破,或者你说你有80%的可能性预先知道某个节点是假突破,那么你应该在某个高点或者低点持有反向的挂单(sell limit or buy limit),同时挂好止损单,防止出现这20%的小概率事件。事实上,你无法估计出接下来假突破的概率有多大,说白了,...

2019-05-24 12:39:59
勋章 我的勋章
  • 签到新秀
    签到新秀
    累计签到获取,不积跬步,无以至千里,继续坚持!
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!
  • 勤写标兵Lv4
    勤写标兵Lv4
    授予每个自然周发布9篇以上(包括9篇)原创IT博文的用户。本勋章将于次周周三上午根据用户上周的博文发布情况由系统自动颁发。