水木山川-CSDN博客

从优秀到卓越（吉姆.柯林斯）从优秀到卓越的框架：第5级经理人-》直面残酷的现实(但决不失去信念)-》刺猬理念-》训练有素的文化-》技术加速器-》飞轮和厄运之轮　　　　　　　　　　　　　　　　　　　　　　飞轮效应　　　　第5级经理人抛开自我的需要，投身到建立卓越公司的宏伟目标中。第5级经理人不是没有自我或自身利益，实际上他们个个都胸怀大志--但是他们的雄心壮志都是将公司的利益放在第一位，而不是首先考虑自己的利益。　　5级经理人体系：第5级经理人：将个人的谦逊品质和职业化的坚定意志相结

2021-08-16 23:55:52 368

原创 Xpath语法详解

xpath 语法　　response.selector属性返回内容相当于response的body构造了一个Selector对象。　　Selector对象可以调用xpath()方法实现信息的解析提取。　　在xpath()后使用extract()可以返回所有的元素结果。　　若xpath()有问题，那么extract()会返回一个空列表。　　在xpath()后使用extract_first()可以返回第一个元素结果。选择直接子节点　　{node}/{node1}: 选择从{node}

2021-04-12 23:33:17 1252

原创 MYSQL数据库 MariaDB断电恢复总结

　　背景：本次是机房异常断电，导致数据库文件损坏。在数据库自启动之后频繁宕机，在多次尝试以后，总结了一下几种方法，及供参考。1.mariadb服务器断电重启之后Missing MLOG_CHECKPOINT的报错信息？　　解决办法是，删除data目录下的ib_logfile0、ib_logfile1这两个文件，建议最好备份一份。2.数据库文件损坏，导致频繁宕机　　编辑 /etc/my.cnf，在[mysqld]小节添加如下两行：　　　　innodb_force_recover = 3　　　

2021-03-17 20:31:52 1109

原创 Scrapy入门

简介　　Scrapy是用纯Python实现一个为了爬取网站数据、提取结构性数据而编写的应用框架，用户只需要定制开发几个模块就可以轻松的实现一个爬虫，用来抓取网页内容以及各种图片，非常之方便。　　Scrapy Engine(引擎): 负责Spider、ItemPipeline、Downloader、Scheduler中间的通讯，信号、数据传递等。　　Scheduler(调度器): 它负责接受引擎发送过来的Request请求，并按照一定的方式进行整理排列、入队、触发事件，当引擎需要时..

2021-02-20 12:18:20 161

原创 Flowable快速入门

flowable官方文档官网：https://tkjohn.github.io/flowable-userguide/#_getting_started　　工作流(Workflow)，是“业务过程的部分或整体在计算机应用环境下的自动化”，它主要解决的是“使在多个参与者之间按照某种预定义的规则传递文档、信息或任务的过程自动进行，从而实现某个预期的业务目标，或者促使此目标的实现”。简介　　Flowable工作流是active5.x的分支，表结构和框架设计有部分类似的。Flowable集...

2021-01-25 17:11:23 1798

原创 Docker安装及使用，Docker 安装MySQL、安装Tomcat、安装RabbitMQ

CentOS7安装Docker　　Docker从1.13版本之后采用时间线的方式作为版本号，分为社区版CE和企业版EE。　　社区版是免费提供给个人开发者和小型团体使用的，企业版会提供额外的收费服务，比如经过官方测试认证过的基础设施、容器、插件等。　　社区版按照stable和edge两种方式发布，每个季度更新stable版本，如18.01，18.09；每个月份更新edge版本，如18.01，18.02。　　Docker支持以下的CentOS版本：　　在 CentOS 7 上，要求系统为64位、系

2020-07-01 09:46:23 277

原创 Anaconda安装常用配置及命令

Anaconda历史版本下载　　　　https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/　　　　https://repo.anaconda.com/archive/Anaconda在Linux离线安装依赖包　　#pip/conda install pak.tar.gz　　#pip install influxdb-5.2.2.tar.gz　　#conda install influxdb-5.2.2.tar.gz在线pip安装依赖包

2020-06-19 00:10:10 735

原创 MySQL获取周、月、天日期，生成排序号

常用MySQL生成时间序列　　--生成最近七天的日期，不包括当天　　SELECT @cdate := date_add(@cdate, interval - 1 day) as dateFROM(SELECT @cdate := date_add(date_sub(CURDATE(),interval 1 DAY), interval + 1 DAY)from resource_publish) t0 LIMIT 7;　　　　2020-06-162020-06-152020-06-14..

2020-06-17 22:27:57 1538

原创 Greenplum数据库时间操作

Greenplum数据库时间操作与mysql有一些区别，汇总以往笔记记录下来。greenplum时间格式：'yyyy-mm-dd hh24:mi:ss.us'、'yyyy-mm-dd hh:mi:ss.us'、'YYYY-DD-MM HH24:MI:SS.us'(与mysql有区别'%Y-%m-%d %H:%i:%s')时间转换（当前时间是：2020-06-16 21:59:46.796948+08）　　select extract(epoch from now()); 　　　　　　--当...

2020-06-16 22:18:49 3034

原创 MySQL 查询树结构、循环查询、查看函数、视图、存储过程

MySQL经常会用到查询树结构数据，这里专门收集整了一篇。构建函数构建树查询函数：查询父级节点函数-- 在mysql中完成节点下的所有节点或节点上的所有父节点的查询-- 根据传入id查询所有父节点的idDROP FUNCTION IF EXISTS `getParList`;delimiter // CREATE FUNCTION `getParList`(rootId INT)RETURNS varchar(255) BEGIN DECLARE sTemp VARCHAR(

2020-06-14 17:50:16 426

原创 TensorFlow重新导入restore报错： OP_REQUIRES failed at save_restore_v2_ops.cc:184 : Not found: Key Variable

最近在解决TensorFlow模型重新导入时遇到下面这个问题，发现网上很多解决办法都在误导，其实报错已经很明显说明问题的根源，只是我们不一定找到问题的根源。报错显示不能在快照中找到对应的键值。报错信息：tensorflow\tensorflow\core\framework\op_kernel.cc:1318] OP_REQUIRES failed at save_restore_v...

2020-03-26 14:35:34 3469 2

原创 Hive 时间操作

Hive 时间转换UNIX时间戳概念：因为UNIX时间戳只是一个秒数，一个UNIX时间戳在不同时区看来，时间是不同的。如UNIX时间戳0，在0时区看来是1970-01-01 00:00:00，在东八区看来是1970-01-01 08:00:00。hive常用时间操作示例-- 返回UNIX时间戳代表的（格林威治零时区）时间，默认格式如下。select from_unixtime(...

2020-03-25 22:13:23 1053

原创 Anaconda更新报404：UnavailableInvalidChannel: The channel is not accessible or is invalid.error404

Anaconda更新一直报错，修改为国内镜像也不好使，最终找到了未被屏蔽的镜像。错误日志： UnavailableInvalidChannel: The channel isnot accessible or isinvalid. channel name: simple channel url: http://pypi.douban.com/simple...

2019-12-17 23:57:31 10337 8

原创 Docker时间与时区设置总结

最近在使用Docker容器时，部署java程序发现时间输出不对，在修改问题时总结如下。　　#date [-R] 　　　　　　　　　　　　　　　　　　　　　　#查看主机时间　　#timedatectl 　　　　　　　　　　　　　　　　　　　　 #查看主机时区　　#tzselect 　　　　　　　　　　　　　　　　　　　　　　 #选择时区Docker时间和宿主同步方法　　1.在r...

2018-12-28 14:20:24 3230

翻译 java.util.stream 库简介

Java Stream简介　　Java SE 8 中主要的新语言特性是拉姆达表达式。可以将拉姆达表达式想作一种匿名方法；像方法一样，拉姆达表达式具有带类型的参数、主体和返回类型。但真正的亮点不是拉姆达表达式本身，而是它们所实现的功能。拉姆达表达式使得将行为表达为数据变得很容易，从而使开发具有更强表达能力、更强大的库成为可能。　　Java SE 8 中引入的一个这样的库是 java.util...

2018-11-14 17:22:05 325

转载 Python基础入门

Python 基础入门　　缩进：Python语言利用缩进表示语句块的开始和退出（Off-side规则），而非使用花括号或者某种关键字。增加缩进表示语句块的开始，而减少缩进则表示语句块的退出。　　控制语句if语句，当条件成立时运行语句块。经常与else, elif(相当于else if) 配合使用。for语句，遍历列表、字符串、字典、集合等迭代器，依次处理迭代器中的每个元素。whil...

2018-11-13 10:36:57 206

原创 HDFS常用命令

HDFS常用命令，虽然现在流行很多hadoop插件，直接或间接操作HDFS，但是熟悉HDFS原生操作命令也是有好处的。HDFS命令和Linux系统操作命令有很多相似之处，对熟悉Linux系统操作的人来说学习很简单，所以大数据入门首先学习Linux系统。hadoop fs 和hdfs dfs 两种命令都可以操作执行。#hdfs dfs -help [com] 　　　　　　　　　　　　　　　　　　...

2018-08-06 15:03:44 5293

原创 Java集合类分析，初始化

Java集合是常用的数据类型，在此详细分析接口和实现类。整个集合框架就围绕一组标准接口而设计，学习集合框架有助开发实践。框架体系图1.Collection 接口Collection 是最基本的集合接口，一个 Collection 代表一组 Object，即 Collection 的元素, Java不提供直接继承自Collection的类，只提供继承于的子接口(如List和set)...

2018-08-03 11:15:59 293

原创 HDFS 入门介绍

HDFS简介　　HDFS（Hadoop Distributed File System，Hadoop分布式文件系统），它是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问，适合那些有着超大数据集（large data set）的应用程序。HDFS基本概念篇设计思想：分而治之：将大文件、大批量文件，分布式存放在大量服务器上，以便于采取分而治...

2018-08-02 14:49:07 702 1

原创 HBase常用操作命令

　　HBase的常用操作命令　　1.进入HBase　　脚本客户端#hbase shell＃进入HBase脚本客户端　　> whoami＃查看当前登录用户　　>状态＃查看HBase节点信息　　>版本＃查看HBase版本　　2.查看HBase所有表　　> list＃查看HBase里面的所有表　　> create_namespace'ns'＃创建命名空间...

2018-07-26 14:51:21 546

原创在Java中String类为什么要设计成final？String真的不可变吗?其他基本类型的包装类也是不可变的吗？

最近突然被问到String为什么被设计为不可变，当时有点懵，这个问题一直像bug一样存在，竟然没有发现，没有思考到，在此总结一下。1.String的不可变String类被final修饰，是不可继承和修改的。当一个String变量被第二次赋值时，不是在原有内存地址上修改数据，而是在内存中重新开辟一块内存地址，并指向新地址。String类为什么要被设计为是final的？　　1.不可变...

2018-07-26 10:24:13 1529

原创《大型网站技术架构.核心原理与案例分析》笔记

《大型网站技术架构.核心原理与案例分析》一.概述　1.大型网站架构演化　　1.1 大型网站软件系统的特点　　　　高并发，大流量；高可用；海量数据；用户分布广泛，网络情况复杂；安全环境恶劣；需求快速变更，发布频繁；渐进式发展　　1.2 大型网站架构师演化发展历程　　　　1.2.1 初始阶段的网站架构：应用程序、数据库和文件等一体在一台服务器上　　　　1.2.2 应用服务和数据服务分离：...

2018-07-18 12:30:37 400

原创 JVM性能、多线程排查常用命令

　　最近遇到很一个很棘手的多线程问题，跟踪了几天终于解决了，在此记录跟踪过程的常用命令，后期有空再做具体的事件总结。软件的开发一定要有监控，一定要有监控，一定要有监控，重要的事情说三遍。没有监控的软件就是放荡不羁的流浪汉，无人看管，不好排查问题，不能及时响应，不能可控。　　运行操作　　　　#jar执行在前后加(nohup &) 或者添加参数(--daemon) 将程序设置为守护进程，在后台...

2018-06-19 11:04:45 854

原创 Git配置SSH Key

　　最近看到很多人在配置Git时，遇到很问题，网上教程千篇一律。这儿自己单独记录一份。Git配置SSH Key1.检查本机是否有ssh key设置,切换到.ssh目录　　$ cd ~/.ssh 或cd .ssh2.配置git用户名和邮箱，配置多个用户时添加 --add 参数　　$ git config --global --add user.name "username"　　$ git confi...

2018-06-06 17:53:01 906

原创 JVM调优原理

　　JVM堆栈　　　　栈是运行时的单位，而堆是存储的单位。　　栈解决程序的运行问题，即程序如何执行，或者说如何处理数据；堆解决的是数据存储的问题，即数据怎么放、放在哪儿。　　在Java中一个线程就会相应有一个线程栈与之对应，因为不同的线程执行逻辑有所不同，因此需要一个独立的线程栈。而堆则是所有线程共享的。栈因为是运行单位，因此里面存储的信息都是跟当前线程（或程序）相关信息的。包括局部变量、程序运行...

2018-06-05 14:44:39 154

原创 JVM调优常用参数

　　查看dump信息　　#jps　　　　　　　　　　　　　　　　　　　　　　　　　#jps查看所有进程信息　　#jstack -l pid > stack.log 　　　　　　　　　　　　　　　　#dump出该进程的所有线程信息及状态　　dump文件里的线程状态有：　　　　死锁，Deadlock（重点关注）　　　　　　　　　　　　死锁线程，一般指多个线程调用间，进入相互资源占用，导致一直等待...

2018-06-04 14:51:36 889

原创 jstat 详解

最近项目里面使用到了多线程，有时候多线程会存在挂掉的情况，趁机好好学习总结一下JVM调优的方法。jstat使用：　　#jstat -help|-options　　#jstat -<option> [-t] [-h<lines>] <vmid> [<interval> [<count>]]　　　　Options — 　　　　　　　　选项，我...

2018-06-04 12:42:55 1533

原创 MySQL建立索引，触发器

创建索引：　　ALTER TABLE <表名> ADD INDEX (<字段>);　　>ALTER TABLE `table_name` ADD PRIMARY KEY (`column`); 　　　　　　　　　　　　　　添加PRIMARY KEY（主键索引）　　>ALTER TABLE `table_name` ADD UNIQUE (`colum...

2018-05-15 16:25:24 518

原创 classpath路径配置

　　在很多Apache的框架中，经常遇见配置classpath情况，但是都没有认真研究过classpath，下面是对classpath的解析。　　classpath：　　是指编译过后的的classes目录　　对于maven的所有项目, 配置文件一般放在resources目录下, 当编译之后会自动复制到classes目录下。　　非maven的所有项目, 一般放在src目录下, 编译之后也会自动复制到...

2018-04-17 22:17:48 1733

原创 IDEA远程调试

问题：通常在java打成可运行的Jar项目时，运行jar时调试很不方便，特别是要在linux上面执行jar包的情况。此时需要将这个项目打成Jar包（如果是maven项目，直接使用package或者install命令），然后再使用IDEA调试Jar包。步骤：1.通过命令启动调试jar文件:(端口5005可以修改) 运行命令：java -jar -Xdebug -...

2018-04-10 09:40:17 932

notepad++右键菜单.bat

Notepad++是自由软件的纯文本编辑器，由侯今吾基于同是开放源代码的Scintilla文本编辑组件并独力研发，整个项目起初托管于SourceForge.net之上，截止到2011年，已被下载超过2700万次，并两度获得SourceForge社群选择奖——最佳开发工具。2010年6月托管于TuxFamily，现由GitHub托管。notepad++右键菜单.bat是便携版添加右键

2022-04-15

积微物联OA app jwwlOA 1.7.2

积微物联OA办公协调系统移动端，jwwlOA 1.7.2版本

2022-04-08

雪球特别版——段永平投资问答录(投资逻辑篇)

雪球是领先的投资交流交易平台，此电子周刊中内容版权由对应的用户和雪球共同所有。第三方若出于非商业目的，此电子专刊的内容转载，应当在作品正文开头显著位置，注明原作者和来源于雪球。问答录内容来源于段永平网易博客及雪球，版权归段永平所有。

2022-03-27

jdk-8u202-solaris-x64.tar.gz

Java Development Kit (JDK) 是Sun公司（已被Oracle收购）针对Java开发员的软件开发工具包。自从Java推出以来，JDK已经成为使用最广泛的Java SDK（Software development kit）。 SE(J2SE)，standard edition，标准版，是我们通常用的一个版本，从JDK 5.0开始，改名为Java SE。 EE(J2EE)，enterprise edition，企业版，使用这种JDK开发J2EE应用程序，从JDK 5.0开始，改名为Java EE。 ME(J2ME)，micro edition，主要用于移动设备、嵌入式设备上的java应用程序，从JDK 5.0开始，改名为Java ME。

2021-03-23

jdk-8u202-linux-arm64-vfp-hflt.tar.gz

Java Development Kit (JDK) 是Sun公司（已被Oracle收购）针对Java开发员的软件开发工具包。自从Java推出以来，JDK已经成为使用最广泛的Java SDK（Software development kit）。

2021-03-23

xpath helper.zip

xpath helper插件是一款免费的chrome爬虫网页解析工具。可以帮助用户解决在获取xpath路径时无法正常定位等问题。该插件主要能帮助你在各类网站上通过按shift键选择想要查看的页面元素来提取查询其代码，同时你还能对查询出来的代码进行编辑，而编辑出的结果将立即显示在旁边的结果框中。

2020-10-16

ElasticSearch Head.rar

ElasticSearch-head就是一款能连接ElasticSearch搜索引擎，并提供可视化的操作页面对ElasticSearch搜索引擎进行各种设置和数据检索功能的管理插件，如在head插件页面编写RESTful接口风格的请求，就可以对ElasticSearch中的数据进行增删改查、创建或者删除索引等操作。类似于使用navicat工具连接MySQL这种关系型数据库，对数据库做操作。

2020-10-16

免费老版本 WiseFolderHider 和文件夹加密软件.rar

Wise Folder Hider 是一个免费软件用来隐藏你的个人文件夹或文件到别的地方，例如你的电脑或移动设备，通过以下简单的步骤用密码保护您的隐私。当然只是建议家庭和个人使用，对于隐藏商业/机密信息可能需要进一步严格加密，版本1.51.79。另外一款是文件夹加密软件，放在要加密的文件夹或文件同级目录即可加密。

2020-05-22

come4j-tomcat.jar ojdbc7-12.1.0.2.jar.rar

Comet4J(Comet for Java)是一个纯粹基于AJAX(XMLHTTPRequest)的服务器推送框架，消息以JSON方式传递，具备长轮询、长连接、自动选择三种工作模式。ojdbc7-12.1.0.2是适用于jdk7，Oracle版本12的包。

2020-05-14

python2.7 yum.rar

centos7上使用yum遇到no module named yum的解决方法安装包，问题系统版本：CentOS Linux release 7.7.1908，下载安装包后依次执行安装python：rpm -ivh python-* rpm-python-* --nodeps -force --replacepkgs，安装yum：rpm -ivh *.rpm --nodeps --force --replacepkgs

2020-05-07

快速入门python教程.ppt

python基础知识培训，主要讲解python的基础知识、web框架、数据分析、机器学习、爬虫框架。

2020-04-21

labelImg.zip

LabelImage是神经网络训练样本常用的标签标定工具，可实现自制样本用于自己网络的调参使用，适用于人工打标签工具，窗口为矩形窗口且不能改变方向，可自定义标签分类。

2020-04-11

greenplum-db-5.19.0-rhel7-x86_64.rpm

Greenplum是一个面向数据仓库应用的关系型数据库,它基于流行的PostgreSQL开发,因为有良好的体系结构,所以在数据存储,高并发,高可用,线性扩展,反应速度,易用性和性价比等方面有非常明显的优势,非常受欢迎.进入大数据时代以后,Greenplum的性能在TB级别数据量的表现上非常优秀,单机性能相比Hadoop要快上好几倍;在功能和语法上,要比Hadoop上的SQL引擎Hive好用很多,普通用户更加容易上手.

2019-09-10

greenplum-jdbc-5.1.4.000223.jar

2019-09-10

greenplum-db-5.21.3-rhel7-x86_64.rpm

2019-09-10

greenplum-db-6.0.0-rhel7-x86_64.rpm

2019-09-10

Navicat Premium_11.2.7简体中文版.zip

Navicat premium是一款数据库管理工具,是一个可多重连线资料库的管理工具，它可以让你以单一程式同时连线到 MySQL、SQLite、Oracle 及 PostgreSQL 资料库，让管理不同类型的资料库更加的方便。

2019-06-02

WaterMake.zip

WaterMake水印工具是款功能比较不错的隐形水印制作工具。常常在用户想对对自己的图片进行权益保护时，用该软件对图片进行添加水印。此资源仅供个人学习、研究之用，请勿用于商业用途。请在下载后24小时内删除。

2019-05-30

comment2name.vbs

在PowerDesigner中按Ctrl + Shift + X，然后将下面的脚本粘贴进去或者打开文件，并运行，就可以将注释comment生成到列的name中去。显示注释操作：选择那个表,右键->Properties->Columns->Customize Columns and Filter(或直接用快捷键Ctrl+U)->Comment(前面打勾)->OK

2019-05-22

name2comment.vbs

在PowerDesigner中按Ctrl + Shift + X，然后将下面的脚本粘贴进去或者打开文件，并运行，就可以将列的name生成到注释comment中去。

2019-05-22

greenplum-jdbc-5.1.4.000212.jar

此版本为官网 Greenplum 的5.18.0版本对应的驱动包 5.1.4.000212版本，java jdbc连接方式跟普通数据库一样，也可添加到到spring项目里面，具体操作类似MySQL数据库连接操作。

2019-05-15