自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(28)
  • 资源 (3)
  • 收藏
  • 关注

原创 linux 的sed 删除文本中包含某字符串的行

由于最近Oracle导出来的sql数据每隔300条包含了prompt xx records committed…, mysql无法识别此字符串,有几万条数据,一条条手动删除的话很麻烦。用linux 中的 sed可以解决这个问题。用如下命令删除包含committed字符的行:sed -i '/committed/d' sql.sql此时sql.sql就不包含prompt xx records committed…, 完美解决!...

2021-08-10 15:15:23 2856

原创 java 读取目录下文件,按照文件名排序,解决排序后出现1.png,10.png,2.png..的问题

java 读取目录下文件,按照文件名排序,解决排序后出现1.png,10.png,2.png…的问题java读取某个目录下的文件,如1.png, 2.png,… 12.png,网上查找到的方法是:File[] files = file.listFiles();if(files==null)return resultFileName;List<File> fileList = new ArrayList<File>();for (File f : files) {

2021-07-30 10:46:57 2062 2

原创 centos 7 开放指定端口

centos 7 开放指定端口最近在vm虚拟机安装的centos7.6 下部署了nacos,端口设置的是10000,然后在win10上无法访问,telnet相关端口发现是不通。确认防火墙已经开启(sudo)systemctl status firewalld # 查看防火墙状态 systemctl start firewalld #开启防火墙 #关闭防火墙systemctl stop firewalld#开机自启systemctl enable firewalld.service

2021-05-30 12:34:04 855 1

原创 spring boot 报 java.lang.NoClassDefFoundError: org/apache/commons/discovery/tools/DiscoverSingleton

起因:spring boot 引入一个web service client 服务,写的定时任务例子,发现执行报错:java.lang.NoClassDefFoundError: org/apache/commons/discovery/tools/DiscoverSingleton。解决: 缺少相关依赖包,但工程的build path -> configure build path -> libraries 下有commons-discovery 和 commons-logging 包..

2021-05-24 10:39:46 2757

原创 xftp传输大文件错误

桌面用xftp传输一个5g文件到服务器,传到1.96g的时候就出现错误了,网上试了把文件夹改为777的方法也不行。查看当前文件夹的大小,发现该文件夹下只挂载了2g空间,传到根目录就好了。

2021-05-07 10:53:24 2882

原创 nginx 正向代理转发提示页面不存在或已删除问题

问题在内网环境的centos下的nginx配置location ,curl请求ip:端口、location配置项 ,报页面不存在, 直接curl 域名就成功location配置:location /fp/ { proxy_pass https://fapiao.yonyoucloud.com/;}在内网的nginx配置如上,但是请求报页面不存在或者删除,直接curl https://fapiao.yonyoucloud.com/ 正常。分析在笔记本电脑如上配置,发现是可以curl

2021-05-06 15:27:06 586

原创 elasticsearch 报错 NoShardAvailableActionException: No shard available for routing [null]]

elasticsearch NoShardAvailableActionException1. 检查健康状态2. 查看unassigned类型的索引名字3. 删除unassigned状态的索引1. 检查健康状态curl --user 用户名:密码 -XGET http://本机ip:端口/_cluster/health\?pretty我不加–user 用户名:密码 会报错,还有如果使用127.0.0.1或者localhost,可能会报错not route to host,反正我是遇到了。{

2021-03-02 19:53:24 13496 1

原创 Spring cloud 启动出现 :org.springframework.beans.factory.UnsatisfiedDependencyException 解决方案

Spring cloud 启动出现 :org.springframework.beans.factory.UnsatisfiedDependencyException 解决方案在使用spring cloud 运行项目的时候,出现org.springframework.beans.factory.UnsatisfiedDependencyException,然后后面一堆错误。查看bootstrap.yml没发现有问题,后来在pom文件中发现,spring-boot-starter-parent的版本为2

2020-10-10 17:24:57 1236

原创 C++ Poco JSON中文解析出现乱码问题

C++ Poco JSON中文解析出现乱码问题1. 问题用C++ 库 POCO 解析JSON时,看到这篇帖子Poco JSON解析, 发现两层的中文解析乱码,如: Poco::JSON::Object o1,o2; o1.set("wo","地址"); o2.set("wo2","地址"); o1.set("wo3", o2); std::stringstre...

2020-01-19 10:27:18 1251

原创 clion ubuntu 16.04环境下poco c++框架安装编译方法

POCO是一个C++的开源库集。同一般的C++库相比,POCO的特点是提供了整一个应用框架1. 下载源码下载地址 poco官网 ,基本包不需要外部依赖。我下载的是poco-1.9.0-all.zip, 表示的是完整版包,需要外部依赖openssl,mysql,obdc。下载完后unzip命令解压包。2. 安装相关依赖:#ubuntu 16.04 下安装mysql,openssl su...

2019-12-17 17:19:34 529

原创 cookiecutter 快速搭建django项目

ubuntu18.04 使用cookiecutter搭建django项目1. 下载cookiecutterpip3 install cookiecutter我的安装过程比较顺利,接下来输入cookiecutter:需要模板,加上github的链接:cookiecuttercookiecutter https://github.com/pydanny/cookiecutt...

2019-10-02 09:21:22 1893 4

原创 神经网络学习笔记:relu & sigmoid 激活函数对比

激活函数Rectified Linear Unit(ReLU) - 用于隐层神经元输出 Sigmoid - 用于隐层神经元输出 Softmax - 用于多分类神经网络输出 Linear - 用于回归神经网络输出(或二分类问题 Softmax激活函数只用于多于一个输出的神经元,它保证所以的输出神经元之和为1.0,所以一般输出的是小于1的概率值,...

2019-08-22 20:58:39 1137

原创 python3 协程

python3 协程协程1. 实例,使用协程极速按移动平均值2. 使用装饰器自动预激协程让协程返回值协程协程与生成器类似,都是定义体中包含yield关键字的函数,区别于:协程中,yield通常出现在表达式的右边,可以产出值,如果yield后面没有表达式,那么生成器产出None。协程可以从调用方接受数据,使用.send(data),而不是next()函数.1. 实例,使用协程极速按移动...

2019-08-22 20:26:46 198

原创 python del 和弱引用

一:delpython 中del语句是删除名称,不是对象,具体看如下可视化:d = [1,2,3]d2 = ddel dprint(d2)第一步:第二步:第三步:当删除的变量保存的是对象的对吼一个引用或者无法得到对象时,del会导致对象被当作垃圾回收。===============================================...

2019-08-22 20:18:13 197

原创 python3 classmethod 与 staticmethod的区别

classmethod 与staticmethod区别区别某个函数前面加上了staticmethod或者classmethod的话,那么这个函数就可以不通过实例化直接调用。什么意思呢?就是说有时候,我们需要把一些具有特定功能的函数放到一起,做成包导入Python程序,最好就是把他们放到一个类中,但是一个类每次我都要去实例化他,我觉得很麻烦,于是我在函数前面加上了@staticmethod,@...

2019-08-22 20:05:28 930

原创 python3 闭包和装饰器

闭包闭包上例的方法效率不高,要把所有值存在历史记录里面,更好的方式是存储当前值和长度装饰器标准库的装饰器functools.lru_cache单分派泛函数闭包闭包值得是延伸了作用域的函数,其中包含函数定义体中的引用,但是不在定义体中定义的非全局变量例子1def make_avg(): series = [] #自由变量 --- def ave(n)...

2019-08-22 19:58:58 337

原创 leetcode 9 回文数

判断一个整数是否是回文数。回文数是指正序(从左向右)和倒序(从右向左)读都是一样的整数。示例 1:输入: 121输出: true示例2:输入: -121输出: false解释: 从左向右读, 为 -121 。 从右向左读, 为 121- 。因此它不是一个回文数解法-:转换为字符串,反向迭代解法二:取余运算class Solution: def isPa...

2019-07-01 22:08:19 74

原创 leetcode 136. 只出现一次的数字

给定一个非空整数数组,除了某个元素只出现一次以外,其余每个元素均出现两次。找出那个只出现了一次的元素。说明:你的算法应该具有线性时间复杂度。 你可以不使用额外空间来实现吗?示例 1:输入: [2,2,1]输出: 1示例2:输入: [4,1,2,1,2]输出: 4解题思路:使用异或运算完美解答class Solution: #思路: 使用异或 d...

2019-07-01 22:04:35 95

原创 win10下 Anaconda tensorflow object detection api 环境搭建

本文前提已经事先安装好Anaconda 和 tensorflow,目标:搭建tensorflow object detection api环境目录1.官方GitHub下载tensorflow object detection API2 .下载Protocol Buffers3.将Slim加入PYTHONPATH参考部分 官方GitHub下载tensorflow obj...

2019-05-24 11:01:21 891 2

原创 牛客剑指offer 4;二维数组查找 python版

时间限制:1秒空间限制:32768K热度指数:1071676本题知识点:查找算法知识视频讲解题目描述在一个二维数组中(每个一维数组的长度相同),每一行都按照从左到右递增的顺序排序,每一列都按照从上到下递增的顺序排序。请完成一个函数,输入这样的一个二维数组和一个整数,判断数组中是否含有该整数思路:例子如下:1 2 8 9 2 4 ...

2019-04-12 17:20:05 128

原创 用anaconda安装Graphlab create

1:在turi官网 免费注册产品密匙2: 下载Anaconda2 4.0版本,安装后打开spyder,打开open command prompt,先升级pip:conda update pip此版本需要pip在9.0以上。然后输入:pip install --upgrade --no-cache-dir https://get.graphlab.com/GraphLab-Create/2.1/你注...

2018-02-24 10:14:28 1254 2

原创 sqoop从mysql导入数据到Hive,但在hive却找不到table

原因:我是用的是hive1.1.0,参考了点击打开链接,找到了原因,这是1.1.0的一个bug,重新安装1.2.2,解决问题

2018-02-01 20:03:58 3690

原创 关于INFO mapreduce.Job: Job卡死的解决办法

网上试了很多方法,无论怎么修改yarn-size.xml,还是一样无法解决问题。最后,参考了点击打开链接  ,评论中的所示,终于搞定!

2018-02-01 19:33:25 4739

原创 hive启动报错ClassNotFoundException: org.apache.hadoop.hive.service.HiveServer

启动hive server时,报错:[hadoop@master ~]$ hive --service hiveserver &[2] 2313[hadoop@master ~]$ Starting Hive Thrift ServerException in thread "main" java.lang.ClassNotFoundException: org.apache.hadoo

2018-02-01 09:56:20 1966

原创 hive遇到的问题:The ownership on the staging directory /tmp/hadoop-yarnis not as expectedThe directory mus

搭建好了hive,由于切换到hadoop无法进入hive,权限不足,于是切换到root,执行:hive history file=/tmp/hadoop/hive_job_log_hadoop_201407010908_503942368.txthive>hive>select count(*) from test;后出现:java.io.IOException: Th

2018-01-28 16:41:07 5648 1

转载 转载-centos7下用rpm 安装mysql

网上搜了好多篇,尝试了很多方法,还是这个方法好:centos7.2下安装mysql5.7,使用rpm包安装 如下:0、环境本文操作系统: CentOS 7.2.1511 x86_64MySQL 版本: 5.7.161、卸载系统自带的 mariadb-lib[root@centos-linux ~]# rpm -qa|grep mariadb mar

2018-01-24 20:40:06 285

原创 mahout0.9朴素贝叶斯测试数据

本实验参考实验楼的  Mahout介绍、安装与应用案例实验环境:centos7 64位mahout0.91:下载数据:地址为 http://qwone.com/~jason/20Newsgroups/ ,下载20news-bydate.tar.gz数据包。使用xftp将数据传输到centos7,解压,在mahout-0.9下新建data,将解压后的两个文件夹转移到data里:t

2018-01-04 20:51:13 474

原创 关于win10下eclipse编译wordcount出现 java.net.UnknownHostException: unknown host:master

困扰两天的问题,百度了n久,在这篇博客下,终于找到了解决方案就是在C:\Windows\System32\drivers\etc 下修改hosts文件,增加一行  : 你的IP master,master是我的hostname

2017-12-19 22:17:54 914

cmake-3.16.0-rc1-Linux-x86_64.rar

CMake是一个跨平台的安装(编译)工具,可以用简单的语句来描述所有平台的安装(编译过程)。 官网上下载巨慢,更新cmake不容易。这是sh格式的,不是压缩包格式的。

2019-12-19

复旦文本分类语料数据集 包含训练集和测试集和全集

复旦中文文本分类数据集,包含训练集和测试集,自然语言处理 看论文看到数据堂的复旦中文文本分类语料无法下载,网上找到了训练集和测试集,4积分,良心价

2018-07-12

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除