自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(61)
  • 资源 (2)
  • 收藏
  • 关注

原创 2021-05-19

GDELT数据说明本文转载及汇整一下两篇文章https://blog.csdn.net/qq_23926575/article/details/78064093https://blog.csdn.net/qq_28145941/article/details/106733397GDELT数据说明GDELT(www.gdeltproject.org)每时每刻监控着每个国家的几乎每个角落的100多种语言的新闻媒体–印刷的、广播的和web形式的,识别人员、位置、组织、数量、主题、数据源、情绪、

2021-05-19 10:18:49 431

原创 2021-05-19

最近公司给安排了项目上的事情以后可以记录一些项目上数据、问题等问题及解决方法也会上传项目上的公开数据方便下载、学习

2021-05-19 10:12:48 136

原创 2020-12-24

2020年12月24日今日平安夜这一年我研究生毕业,找到了一份不是码代码的工作,但是和研究方向相同,在疫情的影响下,就业困难,但我也能养活我自己了。等以后慢慢积累经验,挣更多的钱。今天发现有新的粉丝,发现我已经好久没有更新技术文章了借此终结我2020年的生活。希望来年身体健康,疫情早日结束。祝关注我的小伙伴学业顺利,工作顺利,人生无BUG。...

2020-12-24 11:21:14 157

原创 10折交叉验证

这里有一个问题我的epoch=10我使用10折交叉验证在10次epoch过程中应该不能更换数据集吧那么使用交叉验证的话,需要10次epoch后更换数据集10折交叉验证共训练100次模型?是这样的吗?不太清楚这个交叉验证的详细过程...

2019-12-30 10:00:04 911 1

原创 pytorch中学到的函数

torch.sum(input, dim, out=None)转载自:https://blog.csdn.net/danerer/article/details/82908081torch.sum(input, dim, out=None) → Tensorinput (Tensor) – 输入张量 dim (int) – 缩减的维度 out (Tensor, optional) ...

2019-10-22 16:19:09 107

原创 python中学到的函数(五)

import的as语法转载自:https://blog.csdn.net/chaoguo1234/article/details/81277589在Python中,如果import的语句比较长,导致后续引用不方便,可以使用as语法,比如:import dir1.dir2.mod# 那么,后续对mod的引用,都必须是dir1.dir2.moddir1.dir2.mod.X...

2019-10-22 16:18:54 160

原创 pytorch中学到的函数

torch.addmm()torch.addmm(beta = 1,mat,alpha = 1,mat1,mat2,out = None)→Tensor执行矩阵的矩阵乘法mat1和mat2。矩阵mat被添加到最终结果中。如果mat1是(n×m)的张量,mat2是(m×p)的张量,然后mat必须是(n×p)张量,out将是一个(n×p)的张量。alpha是在mat...

2019-10-22 16:18:39 301

原创 centos7安装tensorflow fold

没有装成功,但是怕忘记,先记录一下自己的失败过程首先,装python在安装之前我已经装了anaconda3,自带了python输入命令,查找安装python的路径which python安装虚拟环境,(p后边是python安装的路径)virtualenv -p/home/teacher001/anaconda3/bin/python env3在目录中创...

2019-10-22 16:18:06 199

原创 python使用matplotlib画出的图如何放到word中

论文中使用的图一般为两种格式:矢量格式(.wmf,.emf,.eps),位图格式(.bmp,.jpj,.png,.tif)注:eps,pdf 属于adobe公司,visio, emf为微软产品,两家存在竞争不能直接以另存为的方式转化矢量格式的图放大后不会模糊,所以这里主要介绍如何使用矢量格式(emf)的图片首先在python中先把图画出来import matplotlib.pyp...

2019-10-22 15:34:23 7980

转载 不能下载的论文如何查看全文

转载自:https://blog.csdn.net/fkyyly/article/details/80397856在IEEE中查看论文,需要登录,又没有账号,只能看论文摘要,看到有博主介绍他的方法很实用,特此转载第一步:在下面的IEEE里面搜索你要文章获取doihttps://ieeexplore.ieee.org/document/7965747百度学术有的也有doi,或者其他网...

2019-10-21 10:20:08 991

原创 ValueError: could not convert string to float 解决方法

加载自定义词向量的时候出现这个问题因为词向量是utf-8编码,加载的时候改为ANSI格式的,说我有部分内容会损坏,我点了确定加载的时候确实出现了错误之后查看我的词向量,有三处错误1、每个词向量前后都有空格,使用strip(),没有解决。使用excel,全选会弹出一个错误的提示,选择清除前后空格2、词向量是300维的,但是有一部分不够300,我直接删掉了3、因为编码方式改变,...

2019-10-11 09:37:20 10356 1

原创 OverflowError: Python int too large to convert to C报错

最近使用torchtext一直碰到这个问题原始代码为:train, dev, test = data.TabularDataset.splits(path='./data/SST2/', train='train.tsv', validation='dev.tsv', test='test.tsv...

2019-10-09 21:17:24 3841 4

转载 分类模型判别好坏的参数F1

转载自:https://blog.csdn.net/qq_14997473/article/details/82684300F1函数的python实现可通过加载sklearn包,方便的使用f1_score函数。函数原型:sklearn.metrics.f1_score(y_true,y_pred,labels=None,pos_label=1,average=’binary’...

2019-09-16 18:26:36 496

原创 使用GloVe生成中文词向量

首先从官网上下载glove下载地址:https://github.com/stanfordnlp/GloVe这个工具是需要在lunix下执行的解压后得到下图把要生成词向量的文本扔进这个文件夹中(文本一句一行,分词)我的文本 222.txt 还 行 一级 棒 , 一切 都 好 ! 玩 的 很 开心 , 很 好 。 景色 优美 , 也 很 好玩 。 风景 ...

2019-09-11 11:02:05 3749 5

原创 stanford sentiment treebank中STree.txt的生成

在使用treelstm时,需要生成中文数据集的STree.txt首先修改了preprocess-sick.py的内容 # split into separate files拆分为单独的文件 split(os.path.join(sick_dir, '222.txt'), train_dir)222.txt为要生成的中文文本然后修改lib/DependencyParse...

2019-09-10 17:45:04 412

原创 ValueError: Found input variables with inconsistent numbers of samples: [5, 380]

使用numpy遇到这个问题看别人是X y的格式不一样,我看了一下我的格式正常然后看了一下我的数据:X长度为5,y长度为380二者不相匹配将y中多余的删掉就好了。...

2019-09-02 19:09:45 7764 8

原创 jieba分词自定义词库无效果

首先我自定义了一个词库,内容为:乾清宫 5太和殿 3黄琉璃瓦 3午门 1我是一个 5凯的试接 1我的分词内容为故宫的著名景点包括乾清宫、太和殿和黄琉璃瓦等我是一个好孩子我是一个好孩子我是一个好孩子故宫的著名景点包括乾清宫、太和殿和黄琉璃瓦等凯的试接 故宫的著名景点包括乾清宫、太和殿和黄琉璃瓦等故宫的著名景点包括乾清宫、太和殿和黄琉璃瓦等故宫的著名景点包括乾清宫、太和...

2019-08-13 09:33:08 6087 9

转载 centos打开spyder是出现ModuleNotFoundError: No module named 'PyQt5.QtWebkitWidgets'

转载自:https://blog.csdn.net/jenas999/article/details/82974811情况如图解决办法:单独安装WebEngine,安装命令为:pip install PyQtWebEngine

2019-07-22 10:41:42 8946 5

转载 lunix安装anaconda

转载自:https://blog.csdn.net/qq_36743482/article/details/82746075首先从官网官网下载对应的版本将它复制到虚拟机中在anaconda文件夹中打开终端输入命令bash Anaconda3-5.2.0-Linux-x86_64.sh输入命令后询问第一次,点回车会有多次询问,自己看情况回答完成后,弄...

2019-07-20 16:48:29 540

原创 python中 替换string变量的值

问题将#替换为None错误1:不需要使用for循环错误2:替代的值要用一个新的变量来接收修改后的d='0 0 # 1 0 0 0 0 0 0 1 0 0 0 0 0 0 0 1 0 1 0 1 0 # 0 0 0 0 0 0 0 0 0 0 0\n'd=d.replace('#','None')print(d)输出:0 0 None 1 0 0 0...

2019-07-17 10:56:34 2527

转载 python中绝对路径的写法

转载自:http://withwsf.github.io/2015/12/30/Python%E5%9C%A8Windows%E7%8E%AF%E5%A2%83%E4%B8%8B%E5%A4%84%E7%90%86%E6%96%87%E4%BB%B6%E8%B7%AF%E5%BE%84%E9%97%AE%E9%A2%98%E6%9C%80%E4%BD%B3%E5%AE%9E%E8%B7%B5/...

2019-07-16 16:40:54 8099

转载 anaconda在原有python3.6的基础上装2.7

转载自:https://blog.csdn.net/zhichicao/article/details/81979059原理就是新建一个环境,环境中python版本为2.7打开anaconda的命令窗口输入命令:conda create -n python27 python=2.7建了一个名字叫python27的新环境,打完这行代码之后会自动下python2.7。上面这句...

2019-07-11 15:40:22 744 2

原创 用pip安装tensorflow

安装CPU版本pip install tensorflow 然后下边报错Cannot uninstall 'wrapt'.解决:pip install -U --ignore-installed wrapt enum34 simplejson netaddr然后再按刚刚的命令装tensorflow...

2019-07-11 09:44:31 15604

转载 如何打开.ipynb文件

首先电脑上已经安装好juypternotebook这里教大家两个方法:1、转载自:https://blog.csdn.net/qq_32274259/article/details/78177207在anaconda下进入命令行,转换到需要打开文件所在目录,输入“jupyter notebook”如图1,即进入jupyter页面如图2,点击需要打开的ipynb文件即可。2、转...

2019-07-10 22:41:10 469

原创 pytorch中的 repeat

转载自:https://blog.csdn.net/NockinOnHeavensDoor/article/details/80273268 (扩展用法) https://blog.csdn.net/cetrol_chen/article/details/79147878(基本用法)首先看一下这个函数numpy.repeat(a, repeats, axis...

2019-07-08 18:31:12 1396

转载 如何“冻结”网络的层?

转载自:https://blog.csdn.net/lvsehaiyang1993/article/details/81132242基于keras“冻结”一个层指的是该层将不参加网络训练,即该层的权重永不会更新。在进行fine-tune时我们经常会需要这项操作。 在使用固定的embedding层处理文本输入时,也需要这个技术。可以通过向层的构造函数传递trainable参数来指定一个层...

2019-07-02 16:56:58 1614

转载 NLP中的encoder和decoder

转载自:https://blog.csdn.net/mebiuw/article/details/53341404这里复习下Sequence2Sequence任务到底是什么,所谓的Sequence2Sequence任务主要是泛指一些Sequence到Sequence的映射问题,Sequence在这里可以理解为一个字符串序列,当我们在给定一个字符串序列后,希望得到与之对应的另一个字符串序列(如 ...

2019-06-28 10:09:21 2435

转载 面向对象和面向过程的区别

之前带C#课的时候了解了这两个的区别,时隔一年又忘记了今天看到一个写的不错的,拿来学习并加深理解转载自:https://zhinan.sogou.com/guide/detail/?id=316512385219...

2019-06-28 09:48:02 97

转载 TensorFlow写的LSTM中用到的参数

转载自:https://blog.csdn.net/u014595019/article/details/52759104TensorFlow写的LSTM中用到的参数及其含义init_scale = 0.1 # 相关参数的初始值为随机均匀分布,范围是[-init_scale,+init_scale]learning_rate = 1.0 # 学习速率,在文本循环...

2019-06-26 15:48:24 3188

转载 机器学习中的正则化

转载自: https://www.zhihu.com/question/20924039觉得讲的很不错

2019-06-19 18:16:59 61

转载 python中的两种除法运算

转载自:https://blog.csdn.net/wxbmelisky/article/details/52001750需要强调和区别的是 / 和 // 这两个除运算符。python 2.7 中,/ 对于两个整数相除来说是整除,计算结果只留下整数部分,而小数部分没有了,例如:>>> 3/21>>>如果想要执行普通的除法,即实现保留计算结果的小数部...

2019-06-17 17:39:36 6932

原创 tensor的奇妙加法

有两种情况:1、(a,1)+(b) = (a,b)x=torch.randn(2,1)y=torch.randn(5)a=x+yprint(x)print(y)print(a)print(a.shape)结果是tensor([[1.0769], [2.5189]])tensor([ 1.6656, -1.5514, 0.2980, -0.4826...

2019-06-17 10:38:47 1614

原创 torch.nn.Linear

转载自:https://blog.csdn.net/dss_dssssd/article/details/83892824 https://blog.csdn.net/claroja/article/details/85326633 https://blog.csdn.net/m0_37586991/article/details/878...

2019-06-11 11:27:31 1171

原创 python中学到的函数(四)

hasattr()函数(内置函数)转载自:https://blog.csdn.net/chituozha5528/article/details/78023463hasattr(object, name)判断一个对象里面是否有name属性或者name方法,返回BOOL值,有name特性返回True, 否则返回False。需要注意的是name要用括号括起来class test()...

2019-06-11 11:12:44 208

转载 python中的logger模块

转载自:https://blog.csdn.net/hallo_ween/article/details/64906838 https://blog.csdn.net/qtlyx/article/details/76037738?utm_source=blogxgwz4logging模块介绍 Python的logging模块提供了通用的日志系统,...

2019-06-11 11:09:25 962

转载 深度学习优化方法

Adam 转载自:https://blog.csdn.net/Xyzx043874/article/details/79301484AdaGrad 转载自:https://blog.csdn.net/program_developer/article/details/80756008sgd 转载自:https://blog.csdn.net/tsyccnh/...

2019-06-11 10:34:34 168

原创 torch的常用损失函数

转载自:https://blog.csdn.net/Coco825211943/article/details/82195036 https://blog.csdn.net/zziahgf/article/details/80196376nn.L1Lossnn.MSELoss(均方损失函数)nn.BCELoss(Binary Cross Entropy二...

2019-06-10 16:35:22 1239

原创 stanford parse使用命令进行句法树的生成过程

之前有介绍过图形化生成的过程,但是需求变了,需要把数据预处理的现成东西写成一个完整的模块,我使用python方法调用java程序,来使用stanford parse。这个是使用命令来执行:(就是官方打包好的一个例子)然后就开始看我们的正儿八经的代码吧:在数据预处理 中,使用cmd调用stanford parse的代码def dependency_parse(filepath,...

2019-05-30 17:51:31 799

原创 python中学到的函数(三)

这次是from.xxx import xxx(导入功能,不能算函数)转载自:https://blog.csdn.net/qq_34105362/article/details/80520468官方文档sound/ Top-level package __init__.py Initializ...

2019-05-27 17:39:19 205

原创 python中学到的函数(二)

open()https://blog.csdn.net/qq_41800366/article/details/862578011、python open() 函数用于打开一个文件,创建一个 file 对象,相关的方法才可以调用它进行读写。2、用法:open(name, mode, buffering)3、参数说明:name : 一个包含了你要访问的文件名称的字符串值。...

2019-05-24 21:18:46 172

主观贝叶斯方法

介绍主观贝叶斯方法,详细介绍贝叶斯公式中各个参数表示的含义

2018-06-24

EM算法分析

对EM算法进行详细的介绍,通过举例来让人更加深刻的了解这个算法的原理

2018-06-24

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除