- 博客(15)
- 资源 (1)
- 收藏
- 关注
原创 基于docker和docker-compose构建kafka-connect集群与sqlserver2017通信
基于docker和docker-compose构建kafka-connect
2022-05-12 21:42:15 961 1
原创 docker和docker-compose部署brat标注工具
docker和docker-compose部署brat标注工具brat工具部署brat工具brat是一款nlp标注工具,该工具集成了nlp实体识别和关系标注,是做知识抽取必备的工具之一,但该工具安装部署比较繁琐,本文给出基于docker和docker-compose工具一键部署该工具。部署本文基于linux部署,部署前安装docker和docker-compose。docker-compose.ymlversion: "3"services: brat: image: cassj
2021-06-25 11:33:44 1420
原创 ipfs docker 启动
预准备预安装docker和dockercomposeipfs0.5版本不支持python api了,所以需要找0.4版本。新建docker-compose.yml文件version: '2'services: ipfs_host: container_name: ipfs_host image: ipfs/go-ipfs:master-2020-04-28-fba0c49 restart: always volumes: - ./staging:
2021-05-28 16:27:18 343
原创 IPFS python-api使用
安装ipfs 安装注意,ipfs 0.5版本不支持python,需安装0.4版本的ipfs,亲测2020年前的ipfs可用。python 安装pip install ipfs-api~=0.2.3支持的功能获取ipfs 状态信息上传文件下载文件python代码import ipfsApiimport osclass Config: """ 配置文件 """ # FISCO BCOS配置文件 data_home = os.path.ab
2021-05-27 16:38:58 995
原创 mongo数据库迁移
mongo数据库表迁移迁移工具下载迁移命令mongoexport导出mongoimport导入迁移小工具导出工具导入工具迁移工具下载近期,公司涉及到mongodb 数据库迁移。首先先下载迁移工具,mongodb-database-tools,我用的是windows的。解压后,将该目录加入环境变量。迁移命令注意:mongo数据有密码的情况下加入 --authenticationDatabase adminmongoexport导出 mongoexport -d dbname -c coll
2021-05-27 10:28:06 592
原创 IPFS安装及初始化
IPFS安装目录打开ipfs官网下载及安装目录本文介绍ipfs的windows环境的安装。打开ipfs官网下载地址: 官网。如果打不开 win+r ,需找到系统hosts文件,hosts文件一般放在C:\Windows\System32\drivers\etc在Hosts文件上面点右键->属性->把只读属性去掉->确定,即可保存记事本打开host文件。再不行:这种hosts文件权限右键–>属性—>安全,修改文件users的权限记事本打开host文件。
2021-02-24 16:50:38 774
原创 医学词向量训练---词向量训练和可视化
医学词向量训练—词向量训练和可视化词向量训练python代码import jiebaimport osimport jsonimport codecsimport multiprocessingfrom gensim.models import Word2Vec, KeyedVectorsfrom gensim.models.word2vec import LineSentencefrom sklearn.manifold import TSNEimport matplotlib.p
2020-11-01 14:54:34 950
原创 医学词向量训练---语料获取
本项目基于39net问答进行医学词向量训练,将问题作为语料,将标签补充到词库中,基于word2vec训练词向量。
2020-10-31 13:10:19 777 3
原创 nvidia-smi无法与driver通信
nvidia-smi无法与driver通信近日,ubuntu18.04系统自动更新系统,输入nvidia-smi后,报以下错:NVIDIA-SMI has failed because it couldn't communicate with the NVIDIA driver. Make sure that the latest NVIDIA driver is installed and running.重装nvidia-smi1.sudo apt-get remove nvidia* -y
2020-10-26 22:00:48 624
原创 国密sm4--python版
国密sm4–python版国密sm4sm4 算法是一个分组算法,用于无线局域网产品。该算法的分组长度为128比特,密钥长度为128比特。加密算法与密钥扩展算法都采用32轮非线性迭代结构。解密算法与加密算法的结构相同,只是轮密钥的使用顺序相反,解密轮密钥是加密轮密钥的逆序。GmSSLGmSSL是一个开源的加密包的python实现,支持SM2/SM3/SM4等国密(国家商用密码)算法、项目采用对商业应用友好的类BSD开源许可证,开源且可以用于闭源的商业应用。python程序from gmssl.sm
2020-10-26 16:57:30 8921 3
原创 算术编码压缩--传统篇
算术编码介绍算术压缩是一种无损的熵编码。1948年,香农提出将信源符号依其概率降序排序,用符号序列累计的二进制作为对信源数据的编码。1960年,Peter Elias发现无需排序,只要编解码端使用相同的符号顺序即可,提出了算术编码的概念。1967年,R. Pasco和J. Rissanen分别用丁昌德寄存器实现了有限精度的算术编码。1979年,Rissanen和G. G. Langdon一起将算术编码系统化,并于1981年实现了二进制编码。1987年,Witten等人
2020-10-23 14:07:42 1136 1
原创 js混淆加密--天气网爬虫
js混淆加密--天气网爬虫混淆加密网站数据获取python代码结果混淆加密网站 今天在爬取污染物时遇到下面网站,总的来说碰到了两大方面的爬虫难题。(混淆加密和debug检测)。待爬取的网站 数据获取一开始就遇到右键禁用,debug检测。 没办法,ctrl+s,直接把网站保存到了本地。这样可以f12了,找到主页面,一通找,找到了ajax请求的代码。 传入城市、月份,然后调js中的方法,接着ctrl+shift+f,全局搜索这玩意。 复制到本地一看,好么,js混淆,找了个反混淆
2020-10-22 11:25:10 267
医学词向量--基于39net语料
2020-10-31
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人