- 博客(81)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 Datawhale 图神经网络总结
我们将首先学习简单图论知识、了解常规的图预测任务，然后学习基于PyG包的图数据的表示与使用学习自定义一个消息传递图神经网络。在节点表征学习与节点预测和边预测里面，学习了节点表征（Node Representation）学习，学习基于节点表征学习的图节点预测任务和边预测任务的实践，超大图上节点表征学习与图预测，这个部分对我的设备要求很大，给我造成不少麻烦，总的来说，本次学习还是非常有收获的，虽然一些知识还是学的不是很深，但是慢慢来，以后继续深入。...
2021-07-10 23:54:37
211
2
原创 Datawhale 图神经网络task7
引用自Datawhalehttps://github.com/datawhalechina/team-learning-nlp/tree/master/GNN超大规模数据集类的创建在前面的学习中我们只接触了数据可全部储存于内存的数据集，这些数据集对应的数据集类在创建对象时就将所有数据都加载到内存。然而在一些应用场景中，数据集规模超级大，我们很难有足够大的内存完全存下所有数据。因此需要一个按需加载样本到内存的数据集类。在此上半节内容中，我们将学习为一个包含上千万个图样本的数据集构建一个数据集类。D
2021-07-10 00:24:35
279
1
原创 Datawhale 图神经网络task6
基于图神经网络的图表征学习方法引用自Datawhalehttps://github.com/datawhalechina/team-learning-nlp/tree/master/GNN引言在此篇文章中我们将学习基于图神经网络的图表征学习方法，图表征学习要求在输入节点属性、边（和边的属性如果有的话）得到一个向量作为图的表征，基于图表征进一步的我们可以做图的预测。基于图同构网络（Graph Isomorphism Network, GIN）的图表征网络是当前最经典的图表征学习网络，我们将以它为例
2021-07-06 00:11:30
214
原创 Datawhale 图神经网络task5
引用自Datawhalehttps://github.com/datawhalechina/team-learning-nlp/tree/master/GNN
2021-07-02 00:38:44
179
原创 Datawhale 图神经网络task4
引用自Datawhalehttps://github.com/datawhalechina/team-learning-nlp/tree/master/GNN先打卡占坑，由于理解的并不是很好，而且最近很忙，所以明天补上打卡。
2021-06-27 22:57:10
249
2
原创 Datawhale 图神经网络task3
引用自Datawhalehttps://github.com/datawhalechina/team-learning-nlp/tree/master/GNN基于图神经网络的节点表征学习引言在图节点预测或边预测任务中，需要先构造节点表征（representation），节点表征是图节点预测和边预测任务成功的关键。在此篇文章中，我们将学习如何基于图神经网络学习节点表征。在节点预测任务中，我们拥有一个图，图上有很多节点，部分节点的预测标签已知，部分节点的预测标签未知。我们的任务是根据节点的属性(可
2021-06-24 00:17:35
206
原创 Datawhale 图神经网络task2
消息传递图神经网络一、引言在开篇中我们已经介绍，为节点生成节点表征是图计算任务成功的关键，我们要采用图神经网络实现节点表征学习。在此小节，我们将学习基于神经网络的生成节点表征的范式——消息传递范式。消息传递范式是一种聚合邻接节点信息来更新中心节点信息的范式，它将卷积算子推广到了不规则数据领域，实现了图与神经网络的连接。此范式包含三个步骤：(1)邻接节点信息变换、(2)邻接节点信息聚合到中心节点、(3)聚合信息变换。因其简单且强大的特性，它广泛地被人们所采用。此外，我们还将学习如何基于消息传递范式构建图神
2021-06-19 23:30:15
168
2
原创 图神经网络打卡task1
通过构造函数Data类的构造函数：class Data(object): def __init__(self, x=None, edge_index=None, edge_attr=None, y=None, **kwargs): r""" Args: x (Tensor, optional): 节点属性矩阵，大小为`[num_nodes, num_node_features]` edge_index (LongTensor, optional)
2021-06-15 21:03:08
263
转载 推荐系统排序（Ranking）评价指标----推荐系统
前言记录论文中常用的评价指标，方便查阅。推荐系统排序（Ranking）评价指标一、准确率（Precision）和召回率（Recall）（令R(u)是根据用户在训练集上的行为给用户作出的推荐列表，而T(u)是用户在测试集上的行为列表。）对用户u推荐N个物品（记为R(u)），令用户u在测试集上喜欢的物品集合为T(u)，然后可以通过准确率/召回率评测推荐算法的精度：准确率描述最终的推荐列表中有多少比例是发生过的用户—物品评分记录；召回率描述有多少比例的用户—物品评分记录包含在最终的推荐列表中。
2021-03-10 14:19:58
3450
2
原创 图神经网络推荐方向--论文代码读记
前言这篇作为自己读论文代码过程中一些简单的代码备忘读记吧，方便查阅。一、torch.cat() 、torch.stack()拼接张量：torch.cat() 、torch.stack()torch.cat(inputs, dimension=0) → Tensor在给定维度上对输入的张量序列 seq 进行连接操作举个例子：>>> ``import` `torch``>>> x ``=` `torch.randn(``2``, ``3``)``&g
2021-03-10 14:08:55
611
原创 AAAI2021 | 你想与谁分享？社交电子商务中的共享推荐研究
AAAI2021 | 你想与谁分享？社交电子商务中的共享推荐研究引用：https://mp.weixin.qq.com/s/mn9yLgK12gfEpEle9kRClw论文链接：http://www.shichuan.org/doc/99.pdf前言这是北邮的一个博士大佬刚发在AAAI2021上，电子商务网站淘宝上有关社交分享推荐，结合了基于元路径的GNN推荐，引入注意力机制，我觉得淘宝的推荐强大的一点就是对业务的特征非常熟悉，而这篇很好地利用了淘宝平台的数据，以及结合淘宝业务与对象特征设计模型
2021-01-15 16:28:15
375
3
原创 KDD19|基于元路径引导的异质图神经网络意图推荐 论文浅尝
KDD19|基于元路径引导的异质图神经网络意图推荐 论文浅尝论文链接：https://dl.acm.org/doi/10.1145/3292500.3330673代码链接：https://github.com/googlebaba/KDD2019-MEIRec前言这篇论文是北邮联合阿里的淘宝一起在淘宝平台研究的有关用户意图推荐，很好地利用了淘宝平台的数据优势，结合异质信息网络的元路径方法并融合一些静态的特征信息，最后经过MLP层（神经网络全连接层），预测意图得分。可以说这篇很好地将图神经网络有关推
2020-12-28 12:59:13
1077
1
原创 ICLR20| 融合多关系图卷积网络COMPGCN论文浅尝
前言今天是21年研究生考试的第一天，回想去年这个时候，自己也是百万大军中的一员，日复一日地在图书馆复习，然后订着酒店，赶着公交，奔赴考场，考完政治和英语伤心自己没有发挥好，这些场景恍如昨日。这一年过的有点光阴似箭，突如其来的疫情打乱了我们每个人的计划，我们被迫取消一些出行、一些活动，甚至一些企业也因为这次疫情而被迫关闭，但是我们依旧如那窗外的春燕，在凌厉的寒冬过后，几度徘徊后，待春暖花开后归来。尽管20年还有计划未完成，会有一些遗憾，一些心愿，但是我们向前看，向往新的一年，希望自己能够科研上有所成果，技
2020-12-26 13:58:03
950
原创 SIGIR20|LightGCN: Simplifying and Powering Graph Convolution Network for Recommendation
SIGIR20|LightGCN: Simplifying and Powering Graph Convolution Network for RecommendationABSTRACT图卷积网络已经成为结合协同过滤算法的最新技术。但是，它推荐的有效性的原因还不是很明确。现有的使GCN适应推荐的工作缺乏对GCN的消融分析，GCN由于参考了卷积神经网络改造而来，所以包含许多神经网络操作。但是作者基于实验发现GCN最常见的两个设计-特征转换和非线性激活对协同过滤的性能几乎没有影响。反而增加了训练的难度
2020-12-16 22:04:53
494
原创 算法笔记-----入门算法
3.1简单模拟#include <iostream>#include <cstdio>using namespace std;int main(){ int n, step = 0; scanf("%d", &n); while (1) { if (n == 1) { break; } if (n % 2 == 0) { n...
2020-01-12 21:26:25
252
原创 算法笔记------C/C++快速入门
C/C++快速入门 C语言语言相对于C++以此来作为上机算法题编程语言确实有些语句过于累赘，有些题目的解决的有些复杂，但是对于算法消耗时间有要求的题目，C语言往往表现的更好，所以我们上机算法题解决上，我们可以统筹二者的优点，因为C++向下兼容C语言，所以我们可以将文件命名为cpp文件，这样可以使用一些C++简便库来方便问题解决，也可以在一些语句上面用C语言的表达方式来节省时间。C++中的...
2020-01-11 21:39:22
334
原创 javaweb学习总结
前言好久没更新博客了，主要是感觉自己遇到到人生的迷茫期，面临毕业，而自己考研失利的结果就是自己现在感觉自己人生之路该如何前行，虽然失利后，可能感觉已有些麻木，并没有很悲伤，但是这结果的品尝也着实不易，看着同学找到工作的工作、考上研的也开开心心毕业，即将研究生之旅，而反观自己，啥也没有。选择工作吧，我有点不甘心，所以我选择了二战，但二战之苦可想而知。前面到现在几乎都是在学习一些开发的东西，比如用...
2019-06-12 11:06:31
657
原创 Sentiment分析app评论情感
前言SentiStrength软件作为情感分析常用的程序应用能自动情绪分析每秒最多16,000个社交网络文本，英语水平准确度达到最高 - 其他语言可用或轻松添加。这篇文章作为Sentiment使用说明文档入门，方便大家使用。SentiStrength报告了两种情绪优势：-1（非负）到-5（非常负）1（非正）至5（非常积极）实验操作下载直接输入邮件下载即可，最后得到Sentime...
2019-05-15 20:47:42
2880
2
原创 年度总结---------记录app评论数据预处理
前言好久没更新博客了，由于大多事（主要还是懒0.0）耽误了。今晚，算是我待在学校最后一个晚上了，也是今年最后一篇博客了，以此献给即将过去的2018年。记录记录今年做的一些自认为有意义的事：今年开始我谈了人生中的第一次恋爱 （0.0） ，虽然后来因为各种原因现在分手了，但是算是今年我觉得最有意义的一件事了，至少大学有段恋爱经历，从中也学习了不少。从学校大数据工作室毕业，算是入门了大数据的大...
2019-05-15 20:46:30
1066
原创 mysql导入csv表
mysql一系列操作可以参考这里show databases;+--------------------+| Database |+--------------------+| 15 || comments || information_schema || mysql || perf...
2019-02-03 22:18:16
586
原创 tensorflowjs保存并加载tf.Model
将tf.Model：保存到Web浏览器的本地存储。本地存储是标准的客户端数据存储。保存在那里的数据可以在同一页面的多个负载中持续存在。 假设你有一个tf.Model名为的对象model。无论是从头开始使用Layers API还是从预训练的Keras模型加载/微调，您都可以使用一行代码将其保存到本地存储：const saveResult = await model.save('locals...
2018-07-31 16:51:28
4240
原创 将Keras模型导入TensorFlow.js
Keras模型（通常通过Python API创建）可以以多种格式之一保存。“整个模型”格式可以转换为TensorFlow.js图层格式，可以直接加载到TensorFlow.js进行推理或进一步培训。目标TensorFlow.js图层格式是一个包含model.json文件和一组二进制格式的分片权重文件的目录。该model.json文件包含模型拓扑（又名“架构”或“图形”：层的描述及其连接方式）和...
2018-07-31 16:38:51
2565
6
转载 机器学习 人工智能 博文链接汇总
记录下一些有用的知识[入门问题][TensorFlow][深度学习][好玩儿的算法应用实例][聊天机器人][神经网络][机器学习][机器学习算法应用实例][自然语言处理][数据科学][Python][Java][机器学习－－初期的笔记][路线][软件安装][面试]简单粗暴地入门机器学习 机器学习的技术栈及应用实例脑洞 深度学习相关最新图书推...
2018-07-31 16:09:48
244
原创 Tensorflow.js
TensorFlow.js 是一个开源库，不仅可以在浏览器中运行机器学习模型，还可以训练模型。 具有 GPU 加速功能，并自动支持 WebGL 可以导入已经训练好的模型，也可以在浏览器中重新训练现有的所有机器学习模型 运行 Tensorflow.js 只需要你的浏览器，而且在本地开发的代码与发送给用户的代码是相同的。TensorFlow.js 对未来 web 开发有着重要的影响，JS 开...
2018-07-31 15:25:23
2146
1
原创 ImageNet爬取数据集
直接下载不了，需要是教育机构邮箱，由于我没有，所以只能通过它给的链接爬取import requestsimport urllib.requestimport time#导入包import osfile=open("C:\\Users\\user\\Desktop\\image.txt",encoding="utf-8")for i,line in enumerate(fil...
2018-06-30 17:42:44
1864
转载 基于python+selenium+Chrome自动化爬取巨潮资讯网A股财务报表
引言：网页爬虫分为静态网页爬虫和动态网页爬虫，前者是指索要获取的网页内容不需要经过js运算或者人工交互，后者是指获取的内容必须要经过js运算或者人工交互。这里的js运算可能是ajax，人工交互不需要解释了。静态爬虫现在已经很成熟了，借助于python中的urllib和beautifulsoup可以很容易实现，爬到的内容通过python的字符串处理写入数据库，甚至可以通过web形式展...
2018-06-26 15:01:43
13215
2
原创 Keras+Django多次加载model出现错误
TypeError: Cannot interpret feed_dict key as Tensor: Tensor Tensor(“Placeholde r:0”, shape=(3, 3, 3, 10), dtype=float32) is not an element of this graph.这个bug困扰了我很多天，因为每次上传图片都调用一次模型，第二次就会出现这个bug，参考百...
2018-06-24 17:16:18
2089
1
原创 进一步python分析财务报表
前言前面某篇博客已经有了初步分析A股财务报表，这里作为我们工作室答辩作业进一步分析了数据。废话不多说上图。 代码已上传到github上：https://github.com/1qweasdzxc/python - 搜索页面 - 主页面 - 公司评分排名 4.公司筛选页面 虽然页面有点简陋，但是功能还算完整，也算是画了将近5天的成果，帮助自己对于PyQt5库有个...
2018-05-30 18:02:00
24497
5
原创 纯NumPy代码从头实现简单的卷积神经网络
在某些情况下，使用 ML/DL 库中已经存在的模型可能会很便捷。但为了更好地控制和理解模型，你应该自己去实现它们。本文展示了如何仅使用 NumPy 库来实现 CNN。卷积神经网络（CNN）是分析图像等多维信号的当前最优技术。目前已有很多库可以实现 CNN，如 TensorFlow 和 Keras 等。这种库仅提供一个抽象的 API，因此可以大大降低开发难度，并避免实现的复杂性，不过使用这种库的...
2018-05-30 17:13:47
4705
1
原创 结合sklearn的可视化工具Yellowbrick：超参与行为的可视化带来更优秀的实现
Yellowbrick 是一套名为「Visualizers」的视觉诊断工具，它扩展了 Scikit-Learn API 以允许我们监督模型的选择过程。简而言之，Yellowbrick 将 Scikit-Learn 与 Matplotlib 结合在一起，并以传统 Scikit-Learn 的方式对模型进行可视化。可视化器 可视化器（Visualizers）是一种从数据中学习的估计器，其主要目...
2018-05-30 12:05:44
2062
2
原创 OpenCV与Python之图像的读入与显示以及利用Numpy的图像转换
由于opencv中图像是BGR编码，而python中的matplotlib是RGB编码的，这就需要我们转化一下了分割、合并b,g,r=cv2.split(img)img2=cv2.merge([r,g,b])numpy索引转化img3=img[:,:,::-1]plt.imshow(img3)plt.show()方法二的效率更高。 那么方法二怎么理解呢？...
2018-05-05 10:18:29
2697
原创 解决python3.x的opencv不能读取中文路径的图片
一般是用cv2.imread函数读取图片，但是含有中文路径的话会出现编码问题，经过一番查找， 有人说 原因是因为python 3.x 将系统字符编码默认为了Unicode，而opencv 读取图片函数的输入参数默认用gbk格式处理， 尝试将b“中文字符路径”.decod（gbk） 依然无解，然后 通过此函数解决，其包含了imread功能...
2018-05-04 15:51:02
3366
转载 强化学习入门……的入门
强化学习是机器学习里面非常重要的一个派别。智能体 (agent) 会不断执行一些操作，通过结果来学习，在不同的环境中分别应该采取怎样的行动。在一系列教学文章里，我们可以了解不同的架构，来解决强化学习的问题。Q学习，深度Q网络 (DQN) ，策略梯度 (Policy Gradients) ，演员-评论家 (Actor-Critic) ，以及近端策略优化 (PPO) 都是将要涉及的算法。这...
2018-04-28 11:14:14
321
原创 python缺失值处理
null/None/NaN null经常出现在数据库中 None是python中的缺失值，类型是NoneType NaN也是python中的缺失值，意思是不是一个数字，类型是float 在pandas和Numpy中会将None替换为NaN，而导入数据库中的时候则需要把NaN替换成None找出空值 isnull() notnull()numeric容器会把None转换为NaN...
2018-04-23 19:38:10
3060
原创 如何使用正则表达式？
数据科学家的一部分使命是操作大量数据。有时候，这些数据中会包含大量文本语料。我们可以采用人工方式，亲自阅读，但我们也可以利用 Python 的力量。毕竟，代码存在的意义就是自动执行任务。即便如此，从头开始写一个脚本也需要大量时间和精力。这就是正则表达式的用武之地。正则表达式（regular expression）也被称为 RE、regex 和 regular pattern，这是一种让我们能快...
2018-04-23 19:27:16
2338
原创 利用GAN生成动漫头像
前言这篇博客参考自：GAN学习指南：从原理入门到制作生成Demo 前面曾经写过一篇：GAN入门介绍 这里再提供一个视频（文末）：干货 | 直观理解GAN背后的原理：以人脸图像生成为例 GAN的原理很简单，但是它有很多变体，如：DCGAN、CycleGAN、DeblurGAN等，它们也被用在不同地方，本文将用到DCGAN来生成动漫头像，可以做到以假乱真的地步。原理整个...
2018-04-12 21:08:41
28655
45
原创 github本地文件上传
两种方法上传文件到github远程仓库github在线上传文件夹 直接拖拽或者选择文件。 注意：github在线无法删除文件或者文件夹，而且超过100以上文件数无法拖拽。通过git工具上传本地文件夹git工具 运行Git Bash 1.配置用户（用户和邮箱为你github注册的账号和邮箱）$ git config --global user.nam...
2018-04-02 12:05:02
232
转载 TF-IDF算法自动提取关键词
前言关键词提取可以是说是NLP中比较常见研究方向，这个涉及到数据挖掘、文本处理、信息检索等很多计算机前沿领域。但今天我们就了解一个简单的算法来提取关键词。 那么我们该如何实现计算机自动提取关键词呢？ 让我们从一个实例开始讲起。假定现在有一篇长文《中国的蜜蜂养殖》，我们准备用计算机提取它的关键词。 一个容易想到的思路，就是找到出现次数最多的词。如果某个词很重要，它应该在这篇文章中多次出现。...
2018-03-27 18:59:21
1223
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人