sin_404-CSDN博客

原创 nginx1.18默认配置启动无80端口进程-备忘录

apt install nginx 默认安装了1.18版本systemctl start nginx后发现80端口并没有启动，亦无法访问默认网页

2022-06-21 19:16:31 941

问题mysql在where后接自定义函数查询时查询时间暴增，秒级查询变分钟导致问题代码SELECT * from temp where name=(select prc_jtof("张三"));分析原因prc_jtof是自定义繁简体转换函数，类似于接了一个复杂子查询，致使全表扫描每一条记录都走一遍子查询（？为什么不是把子查询结果缓存下来匹配）解决办法把子查询结果拿出来做匹配SELECT * from temp temp join (select prc_jtof("张三") as pfn

2022-05-08 12:26:18 638

转载 win10 添加虚拟网卡，配置op路由

源地址：https://www.swack.cn/wiki/001557409799713ca16fa7271334e4cadbf9cc76fd0d933000/0016044578258439cfe7182030c4992b67cd15ff7e07c59000客户端路由配置https://blog.csdn.net/joshua317/article/details/120245443路由配置：默认情况下全线路走服务器路由win本机路由查看：route printroute-nop

2022-04-08 16:15:25 497

原创 shell常用命令-备忘录

1、根据端口|pid排查问题netstat -tnlp 查看当前在用端口并显示pidlsof -i: port 查看具体端口号被谁占用ps -ef|grep 'pid|port' 根据pid或端口2、查看路由转跳mtr -r ip # 输出路由报告mtr -c(n) ip # 发送多少包数据mtr # my traceroute3、系统资源自检ifconfig -a | ip a 查看网卡netstat -tnlp 查看网络端口iostat 1 10 查看io使用情况 1

2022-04-08 16:06:33 386

原创关于过快S验证码的一些问题

今年真是过的莫名其妙的一年，转眼就最后一天，笔记本手托是真冷，水点东西记录一下好像做了点什么。前段时间分析短视频数据时在扒拉快S数据时发现他们的验证码有些意思，在chrome里手拖能过用selenium老是失败，截数据感觉怎么看都没问题，不管是轨迹模仿还是模拟抖动。一度放弃准备从js逆向入手（js分析是一件让人头大的事情），后来发现问题居然出在拖动滑块的速度上，我还以又出了什么新奇的检测手法。# 这里移速是个固定值，需要在源码里调整class PointerInput(InputDevice):

2022-01-31 22:40:08 524

原创 docker20小记

causeA100创建docker服务器跑tensorflow1.x error,默认镜像:tensorflow/tensorflow:1.15.5-gpu与安培卡不兼容，这里使用nvidia提供的：nvcr.io/nvidia/tensorflow:20.10-tf1-py3常用命令docker cp镜像和物理机拷贝文件示例：docker cp train.tsv b4881c260d44:/root/systemctl restart docker 重启docker ps查看当前正在运

2021-12-27 18:26:36 1166

原创 ESXI虚拟机启动，模块“MonitorLoop”打开电源失败

这个问题挺莫名其妙的，虚拟机关机后就打不开了，关机前大概还有2-3g磁盘空间，找了下类似的问题，确实是磁盘空间不足导致的，但没提个明确的解决方法。此时是无法扩充磁盘的，但可以设置内存容量，应该是虚拟机启动按照内存容量分配虚拟空间不足导致无法启动。把内存设置为剩余磁盘的1/2，我这边设置为1g后正常启动。...

2021-12-03 10:23:21 12080 1

原创 torch加载自定义模型的问题

-----------------------------------------------------------------------------------------------------------------------------常规加载方法参考：pytorch-模型保存和加载 - 贝壳里的星海 - 博客园pytorch-模型保存和加载加载模型参数和选择是由保存的模型数据结构决定，故先要确定保存模型模型的方法和数据结构保存模型 # 模型权重参数 model.state_d...

2021-09-29 12:10:45 297

原创 rtx3060安装ubuntu21与tensorflow1.15环境

前两天主机刚挂(makop)，lostall my files。之前一直纠结迁移数据麻烦，结果一波被整完了，都懒得看有哪些数据，直接格了4个盘，共享盘的习惯让我的nas也遭了殃。这样，一台干净的主机就空出来了。前段时间又在搞mt5的finetuning，就想着搭个方便跑的环境。总而言之，很麻烦，坑很多，有点后悔买30系显卡了。昨晚8点半开搞，本想着12点前搞完，结果硬是搞到凌晨3点多，今天起来整个人都不好了，果然，年纪一大，再熬夜身体就遭不住了。...

2021-07-17 10:26:50 1031

原创 numpy数组和图片互转

一、numpy array的存储和加载：load() 和 save() 函数是读写文件数组数据的两个主要函数，默认情况下，数组是以未压缩的原始二进制格式保存在扩展名为 .npy 的文件中。 savez() 函数用于将多个数组写入文件，默认情况下，数组是以未压缩的原始二进制格式保存在扩展名为 .npz 的文件中。 loadtxt() 和 savetxt() 函数处理正常的文本文件(.txt 等)二、narray数组还原图片import numpy as npfrom PIL im...

2021-04-02 14:32:50 13194

原创 darknet-yolov3、yolo-fastect使用rtx30系显卡cuda环境在win10平台编译与训练的相关问题

看我这个标题，就知道是踩了多少的坑win10跑darknet，还用的是tm的3060，我一度想把它丢了换20系，好直接下载git上编译好的cuda10版本1. cmake 编译无法找到cuda，nofound问题。：这个问题可能是你安装cuda的时候没有选关联vs的那个组件有关。我出现这个问题是因为安装cuda账户不是当前账户导致的，最后选择重装了cuda后面看到大佬拷贝这个目录：C:\Program Files\NVIDIA GPU Computing Toolkit\CUDA\v1.

2021-03-26 23:38:18 1662 10

原创 pycharm在虚拟环境下跑jupyter notebook问题记录

最近在pycharm里运行ipynb文件发现个问题，如果是在conda的虚拟环境或者额外创建项目的venv里会提示：jupyter kernel does not match project interpreter提示内核版本不匹配，要求register project interpreter as kernel,选择的话提示dll问题找不到模块,我尝试改configer从url读取依旧无效事实上此时jupyter是已经启动了的，且可以在网页上访问，猜测是pycharm识别的问题我通过重复.

2021-03-04 16:31:15 4438 7

原创 keras-ocr实例测试

keras-ocr 文档地址参考文章一篇入门深度学习OCR：数据集和算法合集错误集合加载Keras保存的模型时，“ AttributeError：‘str’对象没有属性’decode’”？pip install ‘numpy1.19’ --force-reinstall 重装库版本pip install 'h5py2.10.0’ --force-reinstallWin10 conda环境，OSError: [WinError 126] 找不到指定的模块 ·co

2021-03-02 18:30:37 567

原创 HIVE数据导入-备忘录

hive 数据导入指定建表的分隔符方便load导入数据(用insert需要走mr)--local用以区分使用本地环境还是hdfs导入数据load data local inpath "C:\\Users\\admin\\Desktop\\apply_amount.txt" into table apply_amount;CREATE TABLE `apply_amount` ( `id` INT,

2021-02-03 16:33:34 112 1

转载 PSI|CSI和ROC|AUC和KS -备忘录

PSI和CSI是对评分卡主模型分数以及入模变量进行监控的一大利器，它们不仅可以实时反映模型的稳定性，也可以快速发现问题，定位问题（客群变化引起、变量变化引起等），从而找到有效的解决方案。PSI指标PSI定义：群体稳定性指标PSI(Population Stability Index)是衡量模型的预测值与实际值偏差大小的指标；稳定度指标可衡量测试样本及模型开发样本评分的分布差异，为最常见的模型稳定度评估指标。其实PSI表示的就是按分数分档后，针对不同样本，或者不同时间的样本，population.

2021-01-15 15:27:16 940

转载 java线程池备忘录

In the absence of an Executor bean in the context, Spring Boot auto-configures a ThreadPoolTaskExecutor with sensible defaults that can be automatically associated to asynchronous task execution (@EnableAsync) and Spring MVC asynchronous request processing

2021-01-15 11:11:46 125

转载 pandas中dict和dataFrame互转

一、dict转Dataframepd.DataFrame(dict_a)二、df转dict使用df.to_dict()默认会把key和值分开参数：'dict' (默认) ，'list'，'series'，'split'，'records'，'index'如果是list(dict)这种嵌套情况转的df，回转需要使用records# 拿上面的数据举例，df_b a b c0 0 1 21 3 4 52 6 7

2020-10-28 09:48:39 4997

原创备忘录 @RestControllerAdvice与异常拦截类示例

import com.mine.ResponseMO;import org.slf4j.Logger;import org.slf4j.LoggerFactory;import org.springframework.validation.BindException;import org.springframework.validation.ObjectError;import org.springframework.web.HttpMediaTypeNotSupportedException..

2020-10-20 15:11:34 2284

原创 pymysql查询查询结果转换json

python3使用pymysql通常select返回的是一个不含字段的列表，通常我们需要通过访问字段来获取字段值把返回结果转成dict会方便我们操作核心就在于创建连接时指定游标类：cursorclass=pymysql.cursors.DictCursor # 打开数据库连接 # db = pymysql.connect(host, user, passwd, db) conn = pymysql.connect(host=host, port=3306, user=u

2020-10-09 16:36:45 2005 1

原创冰蝎shell.jsp对jdk8编码包BASE64Decoder的改动

编码包从JKD 9开始rt.jar包已废除，从JDK 1.8开始使用java.util.Base64.Decoder<%@page import="java.util.*,javax.crypto.*,javax.crypto.spec.*" %><%! class U extends ClassLoader { U(ClassLoader c) { super(c); } public Class

2020-08-28 17:58:32 1396 1

原创 springaop拦截自定义注解，反射获取response参数

package com.example.aspect;/** * @Description: * @Author: wulh * @Date: 2020/8/7 10:59 */import com.example.annotation.Track;import com.example.util.ClassUtil;import lombok.extern.slf4j.Slf4j;import org.aspectj.lang.ProceedingJoinPoint;import .

2020-08-07 17:06:33 1339

原创整理篇-回归

#!/usr/bin/env python# -*- coding: utf-8 -*-# @Time : 2020/7/30 10:46# @Author : lH.wu # linear regression 线性回归测试import matplotlib.pyplot as pltfrom scipy import stats# 横坐标值和纵坐标值xl = [5, 7, 8, 7, 2, 17, 2, 9, 4, 11, 12, 9, 6]yl = [99, 86, .

2020-07-30 15:55:05 122

原创备忘录：python.requests获取url（重定向）

import requestsurl = 'http://home.cnblogs.com/u/xswt/'r = requests.get(url,headers={"Content-Type":"application/json"})reditList = r.history#可以看出获取的是一个地址序列print(f'获取重定向的历史记录：{reditList}')print(f'获取第一次重定向的headers头部信息：{reditList[0].headers}')print(f'获取

2020-07-22 14:09:42 1726

转载 kafka示例

前言：kafka比rabbitmq好用，真香（懒是阻碍学习的第一要素）一、zookeeper准备（单机配置）1.下载地址：https://zookeeper.apache.org/releases.html2. 启动：./zkServer.sh start | ./zkServer.sh start-foreground 后台关闭 ./skServer.sh stop3.配置文件：zoo_sample.cfg 看网上教材要改成zoo.cfg，但实测不改也是默认配置文件4.j...

2020-07-16 11:49:27 214

转载 mongo的基本操作-备忘录

mongodb启动1.以配置文件启动./bin/mongod --config mongodb.conf 2.手动指定相关地址路径启动/usr/mongodb/bin/mongod --dbpath=/usr/mongodb/db --logpath=/usr/mongodb/logs --logappend --auth --port=27017 --forkmongodb关闭use admindb.runCommand("shutdown")|or|db.shutdownSer

2020-06-03 10:39:58 145

原创 python几个简单的正则使用

获取时间reg = '\d{4}年\d{1,2}月\d{1,2}日'# # reg = '\d{4}年\d{2}月\d{2}日'string = '2019年10月17日 - 论坛引起强烈反响,中国人民大学中国普惠金融研究院(CAFI)理事会联席主席兼院长贝多广...www.licai18.com/article/ArticleDetail.jsp?d...-快照-理财18'x = re.search(reg, string)print(x.group(0))一次性替换多个字符，可以替代多次使

2020-05-13 15:14:17 178

原创 Flask对接mongo上载文件

from bson import ObjectIdfrom flask import Flask, render_template, request, Responsefrom gridfs import GridFSfrom pymongo import MongoClientapp = Flask(__name__)client = MongoClient('localhost', 27017)db = client.mediagfs = GridFS(db)@app.route.

2020-05-12 16:57:45 172

转载 selenium常见问题

基本操作from selenium import webdriverbrowser = webdriver.Chrome(executable_path='chromedriver.exe') # 声明一个浏览器对象指定使用chromedriver.exe路径browser.get("https://www.baidu.com") # 打开Chromeinput = b...

2020-01-20 10:22:48 1482

原创 python爬虫标签对网页内容解析的影响

一、第一种是标签嵌套的情况，直接上图。如上图这种情况，直接使用 .xpath("//div/ul[@class='show']/text()")[0]是拿不到被<em></em>标签括在里面的内容的，如果单独获取em标签内容的话，拼接的字符串容易乱套，最好还是一次性拿到字符串。通过搜索引擎发现xpath的.string用法尝试后发现没卵用，八成是版本变迁吧。...

2020-01-20 10:20:56 484

原创 python爬虫 \x00对网页解析的影响

前两天在爬贴吧的时候，发现解析网页内容的时候无法获取部分元素。开始以为是动态网页，后发现当前页面包含我需要的数据，并非是靠js异步，在屏蔽js使用后发现通过模拟浏览器和保存到文本后都能解析到文本，唯独我直接把pq(rsp.text)无法获取到元素，这就很有意思了。然后怀疑是否是解析库的缘由，使用lxml与bfs4均无法获取到元素，排除这个原因。接着用蠢办法一步一步解析网页，通过对比删...

2020-01-20 10:20:32 659

原创 springboot-jpa-repo继承顶层封装，mybatis的下划线转驼峰配置和beancopy记录

// 这个注解使当前接口不被扫描到bean中，以免启动报错@NoRepositoryBeanpublic interface BaseRepository<T,S> extends JpaRepository<T, S> {}// T S分别是对实体类和主键的映射泛型public interface creditApply<T> extends ...

2020-01-20 10:20:10 266

原创 python logging日志防止重复打印

直接上代码def getLogging(logFilename='/app/logs/logs.txt'): logger = logging.getLogger() if not logger.handlers: logging.basicConfig( level=logging.INFO, format='...

2019-11-26 15:54:02 598

原创 Content-Type数据格式对传参影响小记

1.http请求中常用的Content-Type数据格式诸如：application/x-www-form-urlencoded、application/json、 application/xml、现在xml格式已经用的很少了，主要就为form格式和json格式2.显示状态&特征 form格式：a=1&b=2&c=3 数...

2019-02-26 17:48:28 386

原创 spring+springmvc+mybatis+redis基于xml的简单配置

大概一年前入了Springboot的坑后就很少在使用xml配置项目了，springboot整合mybatis的微服务架构已经是javaEE开发的趋势。但直至今日，官方推荐的默认配置依然是基于xml和properties的，包括我工作至今所触及的大部分项目。说下个人猜测的原因吧：开始号称零配置springboot确实做到了5分钟搭建一个项目，少部分基于spring的配置通过注解实现，看上...

2019-01-16 18:23:30 951 2

转载 CentOS7使用firewalld打开关闭防火墙与端口

Reprint from 莫小安 cnblogs(https://www.cnblogs.com/moxiaoan/p/5683743.html)CentOS7使用firewalld打开关闭防火墙与端口1、firewalld的基本使用启动： systemctl start firewalld关闭： systemctl stop firewalld查看状态： systemctl sta...

2019-01-09 11:02:52 2220

原创 java克隆的一些解惑

java克隆是java中获取与原对象完全相同的另一对象的一种方法java的相关问题点：假克隆，真克隆；浅克隆，深克隆java克隆围绕的核心点：克隆对象的内存地址是否变化java各种类型变量值传递与引用传递值传递类型：java基本类型与特殊类(类似final类String）引用传递类型：java的大部分封装类具体分析的其他类型变量：各种池等，不受堆栈控制的一些东西java...

2018-12-01 00:44:54 995

原创 java普通代码块，静态代码块和构造器在实例化时执行顺序

测试代码：public class test4 { { System.out.println(1); } static { System.out.println(2); } test4() { System.out.println("构造器"); } { System...

2018-11-27 16:47:06 344

转载 linux面试题

一、填空题1. 在Linux 系统中，以文件方式访问设备。2. Linux 内核引导时，从文件/etc/fstab中读取要加载的文件系统。3. Linux 文件系统中每个文件用indoe节点来标识。4. 全部磁盘块由四个部分组成，分别为引导块、专用块、 i 节点表块和数据存储块。5. 链接分为：硬链接和符号链接。6. 超级块包含了i 节点表和空闲块...

2018-10-21 09:12:05 6872

空空如也

git 本地仓库master跟踪到远程仓库报错

@Aspect，是否属于过滤器或拦截器？

求，SpringMVC+MyBatis免xml的纯java注解配置方式？

java如何保存聊天记录？

java计时器和死循环哪个好？哪个建议使用？

HTML鼠标点击后播放音乐和动态