Ciao112-CSDN博客

原创 conda安装包时出现错误You will need to adjust your conda configuration to proceed.

如果在用conda安装包时出现：Loading channels: failed CondaHTTPError: HTTP 404 NOT FOUND for url <https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main/noarch/repodata.json>Elapsed: 00:00.084698 The remote server could not find the noarch directory for th

2020-11-23 21:12:24 912

原创 Mybatis-plus分页查询

1. 在配置类中配置分页的插件2.编写分页代码**（1）**直接new page 对象，传入两个参数：当前页和每页显示的记录数**（2）**调用mp的方法实现分页查询

2020-07-29 19:55:35 1211

原创 Windows本地的VS code连接linux服务器时，每次需要输入密码的解决方案

root/.ssh # 该目录为根目录下的.ssh，需要根据自己服务器的实际目录修改。通常.ssh文件夹是隐藏起来的，可以通过上述的目录地址找到该文件夹。然后用记事本打开id_rsa.pub文件，复制里面的全部内容；C:\Users\用户名.ssh。

2024-01-31 16:46:59 384

原创 OpenAI版本迁移本地代码修改：从0.到1.

【代码】OpenAI版本迁移本地代码修改：从0.*到1.*

2024-01-11 15:23:48 524

原创 Linux系统中，同一文件夹下克隆conda的一个虚拟环境，并重新命名新的虚拟环境

这样就通过conda create --clone命令,在conda环境下克隆了一个名为aa的虚拟环境,并将新的克隆环境命名为zz。这个命令会克隆aa环境,创建一个完全相同的新环境zz。

2023-08-29 10:44:31 675

原创本地(Windows系统)上传文件或文件夹到Linux服务器中

这里使用使用SCP命令行工具（推荐）：SCP（Secure Copy Protocol）是一个在本地主机和远程主机之间安全地传输文件的命令行工具。打开命令提示符（cmd）或PowerShell。假如我本地的文件夹的位置是：“D:\data”，我服务器的地址为“10.1.11.202:8080”，需要上传到服务器中的“/root/data”位置使用以下命令将D:\Data\wizardcoder-python-34b文件夹上传到Linux服务器。

2023-08-28 11:21:05 1769

原创在Linux环境的docker中安装neo4j，并且安装APOC插件（从零开始手把手教学安装版本）

======================================================================================写在最后，neo4j和APOC的版本对应非常重要，我也是踩了很多次版本的坑之后才顺利配置完成，希望大家都能与i此成功！=======================================================================================以上是安装docker的步骤。

2023-08-08 20:07:55 697

原创使用python对一组数据进行自相关、偏相关分析

数据自相关系数

2023-02-16 11:45:57 878 1

原创神经网络训练多任务学习(MTL)时，多个loss怎么分配权重(附代码)

。

2022-10-05 14:19:22 2621 1

原创 Linux服务器中Pytorch训练过程可视化之tensorBoard安装使用教程

也是我的一个备注，防止以后忘了怎么使用首先就是安装tensorBoardpip install tensorboard或者使用清华镜像更快一些pip install -i https://pypi.tuna.tsinghua.edu.cn/simple tensorboard 导入刚刚安装的包from torch.utils.tensorboard import SummaryWriter 这里的SummaryWriter的作用就是，将数据以特定的格式存储到刚刚提到的那个文

2022-05-16 09:31:15 3182

原创 Python训练模型加快训练速度之使用AMP(AUTOMATIC MIXED PRECISION EXAMPLES自动混合精度)

由于我自己的模型训练时间会比较久，所以找到了该方法加快我的模型训练速度具体使用的torch包torch.cuda.amp在torch官方文档中表示，“自动使用混合精度训练”，一般是同时使用torch.autocast和torch.cuda.amp.GradScaler。Ordinarily, “automatic mixed precision training” uses torch.autocast and torch.cuda.amp.GradScaler together, as sho

2022-05-10 19:52:55 1317

原创 Conda中的环境迁移到另一个服务器

这是我自己在网上尝试过的成功的一个方法首先在你有环境的服务器中安装conda-packpip install conda-pack打包环境conda pack -n my_env //my_env为环境名打包后的压缩包在当前目录，把他下载后（我的大概有1个G）上传到另一个服务器比如我需要打包迁移到另一个服务器的环境是 “baseline”，则会产生“baseline.tar.gz”这个压缩包3. 在另一台服务器上需要首先安装过conda（这里不做详细介绍）将上述得到的base

2022-03-31 09:47:16 1500

原创将python列表中的多个列表转化为一个列表：列表的扁平化处理总结

方法一：使用itertoolsimport itertoolsa = [[1, 2, 3, 4], [4, 4, 5, 6], [7], [7, 8, 9]]out = list(itertools.chain.from_iterable(a))print(out)方法二：使用sum()函数a = [[1, 2, 3, 4], [4, 4, 5, 6], [7], [7, 8, 9]]out = sum(a, [])print(out)方法三：使用operator、reduce函

2022-03-23 19:57:35 1527 1

原创梯度累加实例

我们在训练神经网络的时候，超参数batch size的大小会对最终的模型效果产生很大的影响。一定条件下，batch size设置的越大，模型就会越稳定。batch size的值通常设置在 8-32 之间，但是当我们做一些计算量需求大的任务(例如语义分割、GAN等)或者输入图片尺寸太大的时候，我们的batch size往往只能设置为2或者4，否则就会出现 “CUDA OUT OF MEMORY” 的不可抗力报错。贫穷是促进人类进步的阶梯，如何在有限的计算资源的条件下，训练时采用更大的batch size呢？

2021-10-21 21:21:42 1035 2

原创 PyTorch中model.modules(), model.named_modules(), model.children(), model.named_children(), model.para

本文通过一个例子实验来观察并讲解PyTorch中***model.modules(), model.named_modules(), model.children(), model.named_children(), model.parameters(), model.named_parameters(), model.state_dict()***这些model实例方法的返回值。例子如下：import torch import torch.nn as nn class Net(nn.Module)

2021-10-21 19:56:59 3089 2

原创 PyTorch模型保存深入理解

PyTorch模型保存深入理解前面写过一篇PyTorch保存模型的文章：Pytorch模型保存与加载，并在加载的模型基础上继续训练，简单介绍了PyTorch模型保存和加载函数的用法，足以快速上手，但对相关函数和参数的具体用法和代表的含义没有进行展开介绍，这篇文章用于记录之。PyTorch保存模型的语句是这样的：torch.save(model.state_dict(), path)加载是这样的：model.load_state_dict(torch.load(path))下面我们将其拆开逐

2021-10-21 19:50:54 728

原创 Pytorch模型保存与加载，并在加载的模型基础上继续训练(上手篇)

pytorch保存模型非常简单，主要有两种方法：只保存参数；（官方推荐）保存整个模型 (结构+参数)。由于保存整个模型将耗费大量的存储，故官方推荐只保存参数，然后在建好模型的基础上加载。一、只保存参数1.保存一般地，采用一条语句即可保存参数：torch.save(model.state_dict(), path)其中model指定义的模型实例变量，如 model=vgg16( ), path是保存参数的路径，如 path=’./model.pth’ , path=’./model.ta

2021-10-21 19:40:37 672

原创 AttributeError: ‘NoneType‘ object has no attribute ‘configure‘

问题一self.output_dim = self.transformer_model.config.hidden_size遇到以下错误AttributeError: 'NoneType' object has no attribute 'configure'则可以写成：self.output_dim = self.transformer_modelself.output_dim = self.output_dim.configself.output_dim = self.outpu.

2021-06-23 21:29:35 686

原创引用spacyV3.0+中‘en‘模块时报错OSError: [E941]Can‘t find model ‘en‘.

很多人在刚导入spacy的时候可能会采用以下方式导入spacy模块包，import spacynlp=spacy.load('en')然后会碰到以下报错，出现该报错主要是因为从Spacy V3.0开始，该导入模块的快捷方式已被弃用，因此要引用spacy模型，得改用全名OSError: [E941] Can't find model 'en'. It looks like you're trying to load a model from a shortcut, which is depreca

2021-05-16 15:01:12 483

原创 SpaCy下载及安装

可参考

2021-05-16 14:27:33 1789 1

原创安装/删除conda环境遇到：RemoveError:requests is a dependency of conda and cannot be removed from conda

问题如上方法如下conda update --force conda

2021-04-27 19:20:35 386

转载在python中安装包出现Retrying (Retry(total=4, connect=None, read=None, redirect=None, status=None))

https://blog.csdn.net/lsf_007/article/details/87931823

2021-04-25 10:41:36 129

原创 Tensorflow安装错误之 Cannot uninstall wrapt

在安装tensorflow的时候出现的问题，如图解决方案pip install wrapt --ignore-installed先运行以上代码，然后再重新尝试以下代码pip install -i https://pypi.mirrors.ustc.edu.cn/simple tensorflow(以上是cpu版本)，想装gpu版本的可以去官网查找对应的版本...

2021-04-19 15:33:24 110

原创 Java通过URL读取网页数据并保存到本地指定路径的文件

import java.io.*;import java.net.MalformedURLException;import java.net.URL;import java.net.URLConnection; public class URLFile { public static void main(String[] args) throws FileNotFoundException { URL url = null; try {

2021-04-12 09:29:08 762 1

原创 Java读取文件的内容到String字符串中

Java读取文件的内容到String字符串中将文件读取到String有很多方法可以在Java中将文件读取到String。在本教程中学习以下几种方法。使用BufferedReader将文件读取到字符串；使用FileInputStream将文件读取到字符串；使用Files类将文件读取到字符串；使用Scanner类将文件读取到字符串；使用Apache Commons IO FileUtils类将文件读取到字符串；1.使用BufferedReader将文件读取到字符串使用BufferedRead

2021-04-12 08:49:51 13860

原创 Java利用正则表达式获取网页端的标签内容

Java利用正则表达式获取网页端的标签内容import java.io.BufferedReader;import java.io.IOException;import java.io.InputStreamReader;import java.net.MalformedURLException;import java.net.URL;import java.util.ArrayList;import java.util.List;import java.util.regex.Matcher

2021-04-11 16:58:50 483

原创 torch中的几种乘法。torch.mm, torch.mul, torch.matmul

文章目录一、点乘二、矩阵乘一、点乘点乘都是通过广播机制的，可以用torch.mul(a, b)实现，也可以直接用*实现。。a = torch.ones(3,4)print(a)tensor([[1., 1., 1., 1.], [1., 1., 1., 1.], [1., 1., 1., 1.]])b = torch.Tensor([1,2,3]).reshape((3,1))print(b)tensor([[1.], [2.],

2021-02-19 10:23:25 260

原创 java: 无法访问org.springframework.util.unit.DataSize 找不到org.springframework.util.unit.DataSize的类文件

SpringBoot项目：java: 无法访问org.springframework.util.unit.DataSize 找不到org.springframework.util.unit.DataSize的类文件如下图所示决解办法如下所示，主要是因为parent的版本号与springboot版本号冲突改成相同的版本号即可...

2020-11-11 21:50:00 5093

原创 Jsp页面乱码问题

创建QueryWrapper对象，调用方法实现各种条件查询

2020-10-11 21:01:40 73

原创使用清华镜像快速安装pytorch

使用清华镜像快速安装pytorchconda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main/conda config --set show_channel_urls yesconda config --add channels

2020-10-03 20:50:19 1820

qq_39641349的博客