- 博客(159)
- 资源 (29)
- 收藏
- 关注
RSS订阅
原创 每天定时采集（当前时间到月底）携程机票数据
每天定时早上八点、下午三点、晚上八点采集数据if __name__ == "__main__": schedule.every().day.at('08:00').do(saveData) schedule.every().day.at('15:00').do(saveData) schedule.every().day.at('20:00').do(saveData...
2019-10-29 09:19:36
1387
原创 GIS篇—搭建本地地图服务器(geoserver )和 leaflet 绘制多边形，点击事件等
因系统开发需求，要开发一个地图数据图层叠加，很简单，但是要求是在内网部署。这就说明了，不能用第三方地图服务器，如百度地图，天地图，谷歌等。那么问题就来了，要什么地图？这个时间我才知道GIS这个名词，我记得有段时间最可笑，自己去投了找GIS地图的岗位，刚开始以为对接百度地图开发就是GIS了，哈哈~原原谅我的无知。 结果，咨询了网友和百度GIS是一门学科，还有专门的考试...
2019-08-08 10:55:21
7461
2
原创 Java操作百万数据量Excel导入导出工具类（维护中）
更新日志:（如果有更好的优化方案或者更高级的工具类：欢迎评论或者私信）* 1.response.reset();注释掉reset，否在会出现跨域错误。* 2.可导出多个单元、poi官方建议大数据量解决方案：SXSSFWorkbook。* 3.自定义下拉列表：对每个单元格自定义下拉列表。* 4.数据遍历方式换成数组(效率较高)、可提供模板下载、每个表格的大标题[2018-09-14]...
2018-06-28 15:12:17
31707
88
原创 Redis+Spring 整合应用教程
Redis+spring 整合应用教程REmote DIctionary Server(Redis) 是一个由Salvatore Sanfilippo写的key-value存储系统。Redis 教程之spring整合应用、redis安装、等等
2016-12-17 22:42:06
1647
原创 java虚拟机学习之旅
1、Java与JVM介绍 JVM是Java Virtual Machine（Java虚拟机）的缩写，JVM是一种用于计算设备的规范，它是一个虚构出来的计算机，是通过在实际的计算机上仿真模拟各种计算机功能来实现的。 Java语言的一个非常重要的特点就是与平台的无关性。而使用Java虚拟机是实现这一特点的关键。一般的高级语言如果要在不同的平台上运行，至少需...
2016-05-17 17:48:01
4470
1
原创 zookeeper 集群搭建教程之应用案例
Apache ZooKeeper是Apache软件基金会的一个软件项目，它为大型分布式计算提供开源的分布式配置服务、同步服务和命名注册。ZooKeeper曾经是Hadoop的一个子项目，但现在是一个独立的顶级项目。Zookeeper没有直接采用Paxos算法的实现，而是使用了一种称为Zab（Zookeeper Atomic Broadcast）的一致性协议。
2016-03-03 19:22:39
3080
1
原创 Nginx 反向代理、负载均衡、虚拟主机实践教程
原文出处：GitHub：https://github.com/andyczy/czy-study-middleware/tree/master/nginx1、Nginx简介 Nginx ("engine x") 是一个高性能的HTTP和反向代理服务器，也是一个IMAP/POP3/SMTP服务器。Nginx是由Igor Sysoev为俄罗斯访问量第二的Rambler.r...
2015-10-13 09:35:05
1488
原创 十大项目管理知识-相关方识别管理
13、相关方识别管理（四步骤）项目相关方管理包括用于开展下列工作的各个过程：识别能够影响项目或会受项目影响的人员、团体或组织，分析相关方对项目的期望和影响，制定合适的管理策略来有效调动相关方参与项目决策和执行。用这些过程分析相关方期望，评估他们对项目或受项目影响的程度，以及制定策略来有效引导相关方支持项目决策、规划和执行。这些过程能够支持项目团队的工作。1）识别相关方识别相关方是定期识别项目相关方，分析和记录他们的利益、参与度、相互依赖性、影响力和对项目成功的潜在影响的过程。本过程的主要
2021-03-08 08:43:16
1437
原创 十大项目管理知识-采购管理
12、采购管理（三步骤）项目采购管理包括从项目团队外部采购或获取所需产品、服务或成果的各个过程。项目采购管理包括编制和管理协议所需的管理和控制过程，例如，合同、订购单、协议备忘录(MOA)，或服务水平协议(SLA)。被授权采购项目所需货物和（或）服务的人员可以是项目团队、管理层或组织采购部（如果有）的成员。1）规划采购规划采购管理是记录项目采购决策、明确采购方法，及识别潜在卖方的过程。本过程的主要作用是，确定是否从项目外部获取货物和服务，如果是，则还要确定将在什么时间、以什么方式获取什么货物
2021-03-08 08:42:23
577
原创 十大项目管理知识-风险管理
11、风险管理（七步骤）项目风险管理包括规划风险管理、识别风险、开展风险分析、规划风险应对、实施风险应对和监督风险的各个过程。项目风险管理的目标在于提高正面风险的概率和（或）影响，降低负面风险的概率和（或）影响，从而提高项目成功的可能性。1）规划风险管理规划风险管理是定义如何实施项目风险管理活动的过程。本过程的主要作用是，确保风险管理的水平、方法和可见度与项目风险程度，以及项目对组织和其他相关方的重要程度相匹配。本过程仅开展一次或仅在项目的预定义点开展。图11-2 描述本过程的输入、
2021-03-08 08:41:43
2703
原创 十大项目管理知识-沟通管理
10、沟通管理（三步骤）项目沟通管理包括通过开发工件，以及执行用于有效交换信息的各种活动，来确保项目及其相关方的信息需求得以满足的各个过程。项目沟通管理由两个部分组成：第一部分是制定策略，确保沟通对相关方行之有效；第二部分是执行必要活动，以落实沟通策略。1）规划沟通管理规划沟通管理是基于每个相关方或相关方群体的信息需求、可用的组织资产，以及具体项目的需求，为项目沟通活动制定恰当的方法和计划的过程。本过程的主要作用是，为及时向相关方提供相关信息，引导相关方有效参与项目，而编制书面沟通计
2021-03-05 08:49:37
601
1
原创 十大项目管理知识-资源管理
9、资源管理（六步骤）项目资源管理包括识别、获取和管理所需资源以成功完成项目的各个过程，这些过程有助于确保项目经理和项目团队在正确的时间和地点使用正确的资源。1）规划质量管理规划资源管理是定义如何估算、获取、管理和利用团队以及实物资源的过程。本过程的主要作用是，根据项目类型和复杂程度确定适用于项目资源的管理方法和管理程度。本过程仅开展一次或仅在项目的预定义点开展。图9-2 描述本过程的输入、工具与技术和输出。图 9-3 是本过程的数据流向图。2）估算活动资源估算活动资
2021-03-05 08:48:34
418
1
原创 十大项目管理知识-质量管理
8、质量管理（三步骤）项目质量管理包括把组织的质量政策应用于规划、管理、控制项目和产品质量要求，以满足相关方目标的各个过程。此外，项目质量管理以执行组织的名义支持过程的持续改进活动。图 8-2 概述了项目质量管理过程的主要输入和输出以及这些过程在项目质量管理知识领域中的相互关系。规划质量管理过程关注工作需要达到的质量，管理质量则关注管理整个项目期间的质量过程。在管理质量过程期间，在规划质量管理过程中识别的质量要求成为测试与评估工具，将用于控制质量过程，以确认项目是否达到这些质量要求。控制质量关注
2021-03-04 15:53:05
649
1
原创 【项管】数据收集工具方法
01头脑风暴（短时间内获得大量创意、需要引导）短时间内获得大量创意，需要引导者引导。用来产生和收集对项目与产品需求多种创意的技术，用于识别相关方的头脑风暴包括头脑风暴和头脑写作。02焦点小组（互动式讨论、同领域、主题专家）由一位受过训练的主持人引导大家进行互动式讨论。焦点小组往往比“一对一”的访谈更热烈。制定项目章程— —焦点小组召集相关方和主题专家讨论项目风险、成功标准和其他议题，比一对一访谈更有利于互动交流。制定项目管理计划— —焦点小组召集相关方讨论项目管理方法以及项...
2021-03-04 14:07:33
367
原创 十大项目管理知识-成本管理
7、成本管理（四步骤）项目成本管理包括为使项目在批准的预算内完成而对成本进行规划、估算、预算、融资、筹资、管理和控制的各个过程，从而确保项目在批准的预算内完工。图 7-1 概括了项目成本管理的各个过程。虽然在本《PMBOK® 指南》中，各项目成本管理过程以界限分明和相互独立的形式出现，但在实践中它们会以本指南无法全面详述的方式相互交叠和相互作用。这些过程不仅彼此相互作用，而且还与其他知识领域中的过程相互作用。在某些项目，特别是范围较小的项目中，成本估算和成本预算之间的联系非常紧密，以至于可视为一个过
2021-03-04 14:06:23
623
1
原创 【项管】项目成熟度模型、量化项目管理
项目管理成熟度模型在基于项目管理过程的基础上把企业的管理水平从混乱到规范再到优化过程分成有序的多个等级，形成一个逐步升级的平台。项目管理成熟度表达的是一个组织（通常是一个企业）具有的按照预定目标和条件成功地、可靠地实施项目的能力。项目管理成熟度模型作为一个全新的理理念，为企业项目管理水平的提高提供了一个评估与改进的框架。1、项目管理成熟度指的是项目管理过程的成熟度。项目管理成熟度模型的要素包括改进的内容和改进的步骤，使用该模型用户需要知道自己现在所处的状态，还必须知道实现改进的路线图。ker
2021-03-03 09:34:15
766
原创 十大项目管理知识-进度管理
6、进度管理（六步骤）项目进度管理包括为管理项目按时完成所需的各个过程。项目进度计划提供详尽的计划，说明项目如何以及何时交付项目范围中定义的产品、服务和成果，是一种用于沟通和管理相关方期望的工具，为绩效报告提供了依据。1）规划进度管理规划进度管理是为规划、编制、管理、执行和控制项目进度而制定政策、程序和文档的过程。本过程的主要作用是，为如何在整个项目期间管理项目进度提供指南和方向。本过程仅开展一次或仅在项目的预定义点开展。图6-3 描述本过程的输入、工具与技术和输出。图 6-4 是本
2021-03-03 08:37:59
2752
原创 十大项目管理知识-范围管理
5、范围管理（六步骤） 项目范围管理包括确保项目做且只做所需的全部工作，以成功完成项目的各个过程。管理项目范围主要在于定义和控制哪些工作应该包括在项目内，哪些不应该包括在项目内。1）规划范围管理 规划范围管理是为记录如何定义、确认和控制项目范围及产品范围，而创建范围管理计划的过程。本过程的主要作用是，在整个项目期间对如何管理范围提供指南和方向。本过程仅开展一次或仅在项目的预定义点开展。图5-2 描述本过程的输入、工具与技术和输出。图 5-3 是本过程的数据流向图。...
2021-03-02 08:28:07
478
原创 十大项目管理知识-整合管理
4、整合管理（七步骤） 项目整合管理包括对隶属于项目管理过程组的各种过程和项目管理活动进行识别、定义、组合、统一和协调的各个过程。在项目管理中，整合兼具统一、合并、沟通和建立联系的性质，这些行动应该贯穿项目始终。项目整合管理包括进行以下选择：1）资源分配；2）平衡竞争性需求；3）研究各种备选方法；4）为实现项目目标而裁剪过程；5）管理各个项目管理知识领域之间的依赖关系。图 4-1项目整合管理概述1）制定项目章程制定项目章程是编写一份正式批准项目并授权...
2021-03-01 16:41:55
606
原创 项目管理（PMP）》敏捷开发（Agile）
1、敏捷开发简介**敏捷开发**（Agile）是一种以人为核心、迭代、循序渐进的开发方法。在敏捷开发中，软件项目的构建被切分成多个子项目，各个子项目的成果都经过测试，具备集成和可运行的特征。简单地来说，敏捷开发并不追求前期完美的设计、完美编码，而是力求在很短的周期内开发出产品的核心功能，尽早发布出可用的版本。然后在后续的生产周期内，按照新需求不断迭代升级，完善产品。2、敏捷开发的4句宣言- 个体与交互 胜过 过程与工具- 可以工作的软件 胜过 面面俱到的文挡- 客户协作 ..
2020-10-28 09:29:53
2560
转载 项目管理（PMP）》项目管理十大知识领域
目录项目管理十大知识领域1、项目整合管理2、项目范围管理3、项目时间管理4、项目成本管理5、项目质量管理6、项目人力资源管理7、项目沟通管理8、项目风险管理9、项目采购管理10、项目干系人管理项目管理十大知识领域1、项目整合管理2、项目范围管理3、项目时间（进度）管理4、项目成本管理5、项目质量管理6、项目人力资源管理7、项目沟通管理8、项目风险管理9、项目采购管理10、项目.
2020-10-28 09:11:29
4152
原创 【rocketMQ初级与进阶】2、docker安装rocketMQ（单机版）
使用docker docker-compose.yml方式进行安装。rocketMQ镜像是使用 apacherocketmq/rocketmq:4.5.0官方镜像，rocketMQ可视化界面也是用apacherocketmq/rocketmq-console:2.0.0官方镜像。1、环境版本dockerversion注意：启动 RocketMQ Server + Broker + Console 至少需要 2G 内存。但是我在文件里配置了JAVA_OPT_EXT=-s...
2020-10-22 17:14:18
645
2
原创 Java操作百万数据量Excel导入导出工具类（程序代码教程）
Java操作百万数据量Excel导入导出工具类（程序代码教程）：# czy-nexus-commons-utils (本库)[https://github.com/andyczy/czy-nexus-commons-utils]，是发布到 [search.maven](https://search.maven.org/) 、 [mvnrepository](https://mvnre...
2020-03-09 09:00:29
4726
1
原创 Scrapy 框架爬虫知识、爬虫实战教程
GitHub Python库 GitHub 爬虫库 官方教程 豆瓣电影爬虫案例1、scrapyScrapy 是一个为了抓取网页数据、提取结构性数据而编写的应用框架，该框架是封装的，包含 request （异步调度和处理）、下载器（多线程的 Downloader）、解析器（selector）和 twisted（异步处理）等。对于网站的内容爬取，其速度非常快捷。...
2019-07-17 10:54:54
637
转载 spring boot 过滤器 filter
一、在spring的应用中我们存在两种过滤的用法，一种是拦截器、另外一种当然是过滤器。我们这里介绍过滤器在springboot的用法，在springmvc中的用法基本上一样，只是配置上面有点区别。二、filter功能，它使用户可以改变一个 request和修改一个response. Filter 不是一个servlet,它不能产生一个response,它能够在一个request到达servle...
2019-07-11 14:42:22
336
转载 spring boot 拦截器WebMvcConfigurerAdapter作用，以及高版本的替换方案
WebMvcConfigurerAdapter 的作用是：进行SpringMVC的一些配置、在Spring中，为了减少xml的配置，引入了@Configuration注解。 WebMvcConfigurerAdapter的出现是为了替代xml出现的，在这个类型里可以配置拦截器相关配置，这个类的使用是弱化繁杂xml配置的一个缩影，Adapter中文译作适配器，转换器，意思就是作为xml配置的一...
2019-07-11 11:56:32
1074
转载 Lvs+keepalived+Nginx双机热备实现Nginx高可用
一、背景在一般的系统架构中，往往是采用一台Nginx做负载均衡，这台Nginx可能负责着转发多台Tomcat的请求。这就有一个问题，如果这台Nginx服务器挂了，那就等于整个系统都挂了。 所以就需要引入一种机制，将Nginx集群化，同时保证有多台Nginx在运行，一台挂了，另外一台还能继续提供服务。要实现Nginx的高可用，就不得不提LVS+Keepalived。 Lvs+Keepaliv...
2019-07-09 15:49:45
1468
1
转载 Spring Controller中全局变量引起的线程安全问题
在Spring中，注解@Controller去修饰一个类时，默认这个类是单例。但是WEB容器为了性能，必然是多线程的去处理HTTP请求，多线程的HTTP请求经过WEB容器转化为servlet请求，接着由Spring的DispatcherServlet分发到对应的Controller处理类。所以在单例的Controller类中，如果存在全局变量，必然会存在线程安全问题。下面将示范多种常用写法，有...
2019-07-09 15:31:29
6074
2
原创 Visual Studio Code 终端无法使用问题-已解决
百度那么多都没有解决啊！！！然后自己静下心来，随便打开一个文件，然后右键选择‘在终端打开’快捷键：Ctrl + `
2018-09-07 11:34:44
39653
8
原创 深度学习笔记—什么是神经网络与TensorFlow实现神经网络？
学习目录：(python自然语言处理实战-核心技术与算法书籍《涂铭 刘详 刘树春》)—推荐 (吴恩达-深度学习)[http://mooc.study.163.com/smartSpec/detail/1001319001.htm]—推荐 (莫烦系列-深度学习与机器学习)[https://morvanzhou.github.io/tutorials/machine-learning/t...
2018-08-10 11:54:08
838
原创 Python豆瓣电影首页类别爬虫小案例 之词法分析数据采集项目
Python is an easy to learn, powerful programming language. It has efficient high-level data structures and a simple but effective approach to object-oriented programming. Python’s elegant synta...
2018-05-27 12:02:38
1045
原创 IT 技术学习资料分享
1、深入浅出Hadoop实战开发(升级版)链接：https://pan.baidu.com/s/1jIAahZg 密码：pin42、SpringBoot教程链接：https://pan.baidu.com/s/1cz1bNC密码：uiqd3、大数据高并发系统架构实战方案课程链接：https://pan.baidu.com/s/1boCacO3密码
2017-12-05 17:48:43
1374
原创 Hadoop之旅（9）— Hbase 教程与shell实战操作
HBase 是建立在Hadoop文件系统之上的分布式面向列的数据库。它是一个开源项目，是横向扩展的。HBase是一个数据模型，类似于谷歌的大表设计，可以提供快速随机访问海量结构化数据。它利用了Hadoop的文件系统（HDFS）提供的容错能力。它是Hadoop的生态系统，提供对数据的随机实时读/写访问，是Hadoop文件系统的一部分。人们可以直接或通过HBase的存储HDFS数据。使用HBase在HDFS读取消费/随机访问数据。 HBase在Hadoop的文件系统之上，并提供了读写访问。
2017-09-24 21:19:00
1184
原创 Hadoop之旅（8）— HDFS API 实战操作
Hadoop 实现了一个分布式文件系统（hadoop Distributed File System），简称HDFS。 Hadoop是Apache Lucene创始人Doug Cutting开发的使用广泛的文本搜索库。它起源于Apache Nutch，后者是一个开源的网络搜索引擎，本身也是Luene项目的一部分。Aapche Hadoop架构是MapReduce算法的一种开源应用，是Google开创其帝国的重要基石。HDFS API 实战操作
2017-08-30 16:31:43
1273
原创 Hadoop+Spark 之旅—脚踏实地、仰望星空（教程目录）
Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统
2017-07-11 09:33:15
1927
1
原创 Hadoop之旅（7）— HDFS HA Zookeeper自动故障转移
1、HDFS HA Zookeeper自动故障转移的需求 在 HDFS 集群下，我们知道也只有单个 NameNode 节点，虽然是集群但是也会有单节点故障等事故。所以需要一个协调者帮助我们遇到故障时及时帮助我们切换可用的 NameNode 节点。这个就是我们的需求、如果我们不需要ZK的话、搭建的HA需要我们手动切换，这是不可行的。所以我们需要 zookeeper安装与配置教程。
2017-06-26 12:16:06
2730
原创 Hadoop之旅（5）— MapReduce Java API案例实战
1、本文实现 HDFS 案例Hadoop之旅（3）— HDFS 原理讲解 和 Hadoop之旅（1）—单机与伪集群安装、简单经典案例准备好环境：idea、创建项目、添加依赖 org.apache.hadoop hadoop-client ${hadoop.versi
2017-06-23 20:15:47
2072
原创 Hadoop之旅（4）— MapReduce 与 YARN 原理讲解
1、MapReduce 介绍 MapReduce是一种可用于数据处理的编程框架。MapReduce采用"分而治之"的思想，把对大规模数据集的操作，分发给一个主节点管理下的各个分节点共同完成，然后通过整合各个节点的中间结果，得到最终结果。简单地说，MapReduce就是"任务的分解与结果的汇总"。2、YARN 介绍 MapReduce has undergone a complete overhaul in hadoop-0.23 and we now have, what we ca
2017-06-20 21:53:42
1781
2
原创 Hadoop之旅（3）— HDFS 原理讲解
1、HDFS 介绍 Hadoop 实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。 Hadoop是Apache Lucene创始人Doug Cutting开发的使用广泛的文本搜索库。它起源于Apache Nutch，后者是一个开源的网络搜索引擎，本身也是Luene项目的一部分。Aapche Hadoop架构是MapRedu
2017-06-18 20:59:25
2117
Solr 教程 pdf
2017-04-11
JavaWeb王者归来_扫描版
2015-12-23
JavaWeb设计模式
2015-12-23
Java面向对象编程
2015-12-23
深入浅出-java
2015-12-23
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人