- 博客(46)
- 收藏
- 关注
RSS订阅原创 爱奇艺 TensorFlow Serving 内存泄漏优化实践
原文：爱奇艺 TensorFlow Serving 内存泄漏优化实践TensorFlow Serving由于其便捷稳定的特点在CTR(Click-through Rate，点击率)预估业务场景被广泛的使用，但是其运行时会出现内存不断增长的问题，也不断有相关issue被提交到Github社区，且目前都是Open状态。本文分享了爱奇艺深度学习平台在实践中发现的两个TensorFlow Serving内存泄漏问题，并修复和提交了 PR 到社区，这里将详细介绍问题的背景以及解决的过程，希望能够有所帮助。..
2021-10-09 19:07:15
274
原创 将 exe 文件反编译成 Python 脚本
近期阅读了一篇很感兴趣的文章，为免后续文章被删无法再阅读，现自己写一下哈~原文章：爆强！将 exe 文件反编译成 Python 脚本！这篇文章跟自己的另一篇文章，正好形成技术上互逆过程，也同时欢迎阅读指正：python代码文件封装为可执行exe文件_py_IA&IM的博客-CSDN博客1.安装依赖库pip install pywin32pipinstall pyinstaller（安装失败可换为：pipinstall pyinstaller --no-use-pep517）或可通过pyt
2021-10-09 16:30:14
4336
2
原创 python代码文件封装为可执行exe文件
1.安装依赖库pip install pywin32pipinstall pyinstaller（安装失败可换为：pipinstall pyinstaller --no-use-pep517）或可通过python第三方库网站下载后安装。验证pyinstaller安装成功：2.python文件生成可执行exe文件windows+R键 -> cmd -> 控制台界面切入python文件所在的目录执行命令：pyinstaller -F python文件名.py，生成..
2020-09-05 23:22:53
2090
原创 Java/Python调用百度LAC进行词法分析实现
LAC功能在于中文分词、词性标注、NER，对于基本的词法分析效果还是蛮不错的，如下为其对应词性和ner标签：写这篇博客的目的也是在于进一步梳理思路和过程，毕竟当时还是踩了一些坑的，写下来，于人于己都方便！话不多说，开始啦~其实吧，LAC如果通过python调用，十分便捷，如LAC githubhttps://github.com/baidu/lac所示：pip安装：pip install lac -i https://mirror.baidu.com/pypi/simple然后就可.
2020-07-15 12:05:49
1935
5
原创 Linux机器：bert-tensorflow调多GPU
1.上传代码包1）github代码包下载： https://github.com/HaoyuHu/bert-multi-gpu2）将整个代码包压缩上传至linux某一文件夹，例如：打开待存储文件路径：cd /data/usr_name上传压缩包：rz并选择压缩包（假如包名为bert-multi-gpu.zip）上传3）解压 7za x bert-multi-gpu.zip4...
2019-06-26 16:12:35
3693
2
转载 BERT[Good]
转载http://www.52nlp.cn/tag/bertBERT相关论文、文章和代码资源汇总BERT最近太火，蹭个热点，整理一下相关的资源，包括Paper, 代码和文章解读。1、Google官方:1)BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding一切始于10...
2019-05-23 16:01:14
136
转载 Python 直接赋值、浅拷贝和深度拷贝解析
转载https://www.cnblogs.com/alinh/p/6603976.html1、b = a:赋值引用，a 和 b 都指向同一个对象。2、b = a.copy():浅拷贝, a 和 b 是一个独立的对象，但他们的子对象还是指向统一对象（是引用）。3、b = copy.deepcopy(a):深度拷贝, a 和 b 完全拷贝了父对象及其子对象，两者是完全独立...
2019-05-22 12:14:44
138
转载 CRF相关
最通俗易懂的BiLSTM-CRF模型中的CRF层介绍https://zhuanlan.zhihu.com/p/44042528NLP-CRF模型原理介绍https://blog.csdn.net/LUFANGBO/article/details/80471304CRF、HMM和MEMM对比https://blog.csdn.net/w5688414/article/details/7...
2019-05-21 10:10:40
135
转载 【NLP】彻底搞懂BERT
【NLP】彻底搞懂BERThttps://www.cnblogs.com/rucwxb/p/10277217.htmlBERT大火却不懂Transformer？读这一篇就够了https://baijiahao.baidu.com/s?id=1622064575970777188&wfr=spider&for=pc...
2019-05-18 11:25:37
306
转载 win10 tensorflow gpu环境配置
转载https://www.cnblogs.com/wanyu416/p/9536853.htmlwin10搭建tensorflow-gpu环境昨天辛苦的配了GPU环境，记录一下防止以后还需要用到。我配GPU的目的是用tensorflow的gpu来加速不用ubuntu是因为一来不习惯，二来我不会配ubuntu的扩展显示器，就更不习惯了，习惯了两个屏之后，一个屏看的着实有点难受...
2019-05-10 17:59:45
334
转载 某大牛的博文目录整理，涵盖机器学习、NLP、数据结构与算法、大数据、编程语言等
转载https://www.cnblogs.com/en-heng/p/6597986.html
2019-05-09 18:34:43
223
转载 白话条件随机场
转载https://zhuanlan.zhihu.com/p/34261803在了解条件随机场的时候，一开始被各种各样的定义和公式吓倒，抽象晦涩。查阅了一些资料也任然很困惑。废了很多功夫终于算是明白了一些，希望这篇文章能帮一些人少走一点弯路，哪怕一个也是极好的。自然，这文章也是错误百出的。CRF 综述简单而又直白的讲，线性条件随机场，是只考虑 概率图中相邻变量是否满足特征函数的一个...
2019-05-08 18:28:18
235
转载 fasttext原理及与word2vec的差异
转载https://zhuanlan.zhihu.com/p/49972507fastText是Facebook于2016年开源的一个词向量计算和文本分类工具，在学术上并没有太大创新。但是它的优点也非常明显，在文本分类任务中，fastText（浅层网络）往往能取得和深度网络相媲美的精度，却在训练时间上比深度网络快许多数量级。在标准的多核CPU上， 能够训练10亿词级别语料库的词向量在10分钟之...
2019-05-08 18:08:45
2912
转载 Word2vec 和 Doc2vec 总结
转自https://www.cnblogs.com/maybe2030/p/5427148.html[该人博客很棒]
2019-05-08 16:22:53
532
转载 从HMM到CRF到LSTM+CRF
从HMM到CRF到LSTM+CRFhttps://blog.csdn.net/u011724402/article/details/82078328
2019-04-24 20:57:57
308
转载 BiLSTM+crf
BiLSTM+crf的一些理解https://blog.csdn.net/bobobe/article/details/80489303
2019-04-24 09:52:26
170
转载 卷积神经网络(CNN)张量(图像)的尺寸和参数计算(深度学习)
https://www.cnblogs.com/touch-skyer/p/9150039.html
2019-04-23 10:56:29
410
转载 sklearn 多类分类、多标签分类、多输出分类
详细内容转自：https://blog.csdn.net/luanpeng825485697/article/details/79858186Multiclass classification 多类分类： 意味着一个分类任务需要对多于两个类的数据进行分类。比如，对一系列的橘子，苹果或者梨的图片进行分类。多类分类假设每一个样本有且仅有一个标签：一个水果可以被归类为苹果，也可以 是梨，但不能同时被...
2019-03-06 15:26:56
1538
原创 客户机和虚拟机复制粘贴，即在VMware中安装VMware Tools问题解决
如若转载，请标明来源！首先展示下搞定后的结果，如下，最终显示此结果界面，则表示VMware Tools安装完成，进一步将虚拟机系统重启，即可将客户机文件复制粘贴进虚拟机系统。下面展示安装VMware Tools的方法。方法一1.在安装完虚拟机后，一直保持网络连接，进行如下步骤，点击标记位置。2.点击“添加”。3.选择 CD/DVD驱动器，一直点击“下一步”，最后...
2019-03-04 09:48:51
1921
原创 tensorboard解决No dashboards are active for the current data set.问题
在tensorflow、tensorboard 安装和使用正常情况下，注意点有三：1）event文件有真实写入事件内容；2）--logdir=file path，“=”后面内容不能有单引号，不加引号或加双引号均可；3）(base) C:\Users\LENOVO>tensorboard --logdir=C:\tf_logs\run-20190301022833 --host...
2019-03-01 10:46:02
228
转载 tensorboard生成的url（localhost或者127.0.0.1）无法打开的解决方法
转自：https://blog.csdn.net/dr_theodore/article/details/80748068亲测有效！第一步，运行有tensorflow的程序第二步， 确保在log目录下有生成的文件存在第三步 在最后加上 --host=127.0.0.1...
2019-02-28 20:30:32
1525
转载 激活函数
什么是人工神经网络？现在，我相信我们大家都很熟悉什么是A-NN了，但接下来请允许我按照自己的理解给A-NN下个定义——它是一个强健有力的，同时也非常复杂的机器学习技术，它可以模仿人类的大脑，继而模仿大脑的运作。正如我们的人脑一样，在一个层次上和神经元网络中有数百万个神经元，这些神经元通过一种称之为synapses（突触）的结构彼此紧紧相连。它可以通过 Axons（轴突），将...
2019-01-25 11:26:20
219
原创 AttributeError: 'CRF' object has no attribute '_inbound_nodes'解决办法
基于Keras实现Bi-LSTM+CRF 讲真的，笔者在该问题上想破了脑皮，一直出现'CRF' object has no attribute '_inbound_nodes'的问题。终于用了一整个下午的时间搞定——是keras和tensorflow版本的问题。未免大家重复耗用时间，本文章重在精简实用，直接切入主题，下面即列出解决办法（对应的版本）： 1) Anacon...
2018-12-06 16:52:26
2650
转载 xpath语法简述
XPath 是一门在 XML 文档中查找信息的语言。XPath 可用来在 XML 文档中对元素和属性进行遍历。XPath 是 W3C XSLT 标准的主要元素，并且 XQuery 和 XPointer 都构建于 XPath 表达之上。因此，对 XPath 的理解是很多高级 XML 应用的基础。这个是w3c上关于xpath的介绍，可以看出xpath是在xml文档中查询信息的语言 ...
2018-07-20 14:18:49
223
转载 TensorFlow RNN深度学习 BiLSTM+CRF 实现 sequence labeling 序列标注
在TensorFlow RNN 深度学习下 BiLSTM+CRF 实现 sequence labeling 双向LSTM+CRF 序列标注问题源码去年底样子一直在做NLP相关task,是个关于序列标注问题。这 sequence labeling属于NLP的经典问题了，开始尝试用HMM，哦不，用CRF做baseline，by the way, 用的CRF++。关于CRF的理论就不再啰嗦了，街货。顺便...
2018-06-29 19:27:32
550
转载 深度学习-LSTM
本来理解和使用不是很清楚，整理以后思路清晰了很多。LSTM之keras实现TensorFlow之LSTMLSTM之keras实现import numpy as npnp.random.seed(2017) #为了复现from __future__ import print_functionfrom keras.datasets import mnistfrom keras.utils i...
2018-06-25 10:34:03
331
转载 做什么算是入行AI?附2018互联网校招高薪清单
本文中，我们将从直观的角度，管窥承担不同角色工作所需要具备的素质，日常工作的状态，和职业发展路径。AI原本是一个专业领域，没什么特别的。作为码农一枚，笔者的工作内容正好在这个领域。近来这一年左右时间里，连续发生了多件事情，使得笔者不得不抬起原本一直低着敲代码的头，看看这个为AI狂欢的世界。【Case 1】 居然在一个月里碰到两位在相对传统行业创业的亲友，来打听将AI技术应用到他们所在行业上的问题，...
2018-06-12 19:52:33
455
转载 python：进程subprocess与管道pipe
一 程序的stdin，stdout，stderr+redirect+pipe程序的stdin，stdout，stderr：通常地一个应用程序默认地连接有3个io流，分别为stdin标准输入流，stdout标准输出流，stderr标准错误输出流。在程序中我们可以使用它们的句柄0,1,2来使用它们。程序与流的工作过程如下：从终端的输入通过标准输入流传给程序，程序的输出传给标准输出流，程序的错误传给标准...
2018-05-22 21:08:12
8632
转载 Python中 sys.argv[]的用法简明解释
sys.argv[]说白了就是一个从程序外部获取参数的桥梁，这个“外部”很关键，所以那些试图从代码来说明它作用的解释一直没看明白。因为我们从外部取得的参数可以是多个，所以获得的是一个列表（list)，也就是说sys.argv其实可以看作是一个列表，所以才能用[]提取其中的元素。其第一个元素是程序本身，随后才依次是外部给予的参数。下面我们通过一个极简单的test.py程序的运行结果来说明它的用法。1...
2018-05-22 21:00:12
220
原创 向量（文本）相似度（或点的距离）的计算方案汇总
鉴于日常学习中常遇到将文本数据等转为向量，然后计算向量相似度的问题，现将常用方案进行初步汇总，如统计不足敬请留言提示补充：1、余弦相似度（cosine） 公式： similarity=cos(θ)=A⋅B∥A∥∥B∥=∑i=1nAi×Bi∑i=1n(Ai)2−−−−−−−√×∑i=1n(Bi)2−−−...
2018-05-16 16:51:26
16990
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人