夕阳下的奔跑517-CSDN博客

原创 python实现DQN代码

`DQN` 类定义了一个简单的神经网络模型，包括三个全连接层。`ReplayBuffer` 类实现了经验回放缓存。`DQNAgent` 类定义了 DQN 算法，包括网络模型、优化器、经验回放缓存等部分。`select_action` 方法用于选择动作，`learn` 方法用于更新模型参数，`update_target` 方法用于更新目标网络。`train` 函数用于训练模型，`test` 函数用于测试模型。在示例中，我们在 CartPole-v0 环境上运行了 DQN 算法。

2023-02-16 15:42:15 1507 2

原创 Python解决复数二次优化问题

Python解决复数二次优化问题

2023-02-11 19:21:58 790

原创【科研】LaTex学习

调出帮助文档：E:\Latex的下载——cmd——texdoc symbols

2022-10-11 16:14:12 334

原创复现BadNets: Identifying Vulnerabilities in the Machine Learning Model Supply Chain

BadNets论文复现

2022-07-06 22:05:34 2404 1

原创使用gnuplot画图

step1 准备数据cwnd.datstep2 创建画图脚本cwnd.gnuplotstep3 写入cwnd.gnuplot# 生成xx.eps矢量图，可以转换为.pdf等格式set terminal postscript eps enhanced size 5, 4 color solid linewidth 3 front 'Times, 32' # terminal postscript eps将图画到eps文件中； enhanced使用增强模式， size 5, 4 横纵比为5:4，colo

2022-05-19 18:19:58 1443

原创【强化学习】多智能体强化学习框架PYMARL

简介pymarl是由英国牛津大学计算机科学系机器学习研究组WhiRL部署的深度强化学习框架，实现包括以下算法：QMIX: QMIX: Monotonic Value Function Factorisation for Deep Multi-Agent Reinforcement LearningCOMA: Counterfactual Multi-Agent Policy GradientsVDN: Value-Decomposition Networks For Cooperative Mul

2022-02-10 10:00:53 3574 2

原创【深度学习】多层感知机（multilayer perceptron,MLP）

def relu(X): return torch.max(X, 0)W1 = nn.Parameter(torch.randn(num_input, num_hiddens) * 0.01) b1 = nn.Parameter(torch.zeros(num_hiddens)) # 偏移W2 = nn.Parameter(torch.randn(num_hiddens, num_output) * 0.01)b2 = nn.Parameter(torch.zeros(num_outpu...

2022-02-10 09:59:58 1181

原创【ns3-gym】安装

[1] protobuf-3.6.1 安装（Linux）如何编译源码目录下只有configure.ac文件和Makefile.am文件的工程如果要编译的源码没有configure文件，执行如下命令。在执行过程中遇到缺失依赖包，则用apt-get安装即可。aclocalautoconfautoheaderautomake --add-missing./configure --prefix=/usr/local/binmakemake checkmake install# wget ht

2022-01-13 15:29:54 1468

原创 tiny-dnn安装与使用

简介：轻量级神经网络开源库。适用于部署到有限计算资源设备的深度学习算法。安装：克隆源码库git clone https://github.com/tiny-dnn/tiny-dnn使用编译工具cmake生成makefile文件安装cmake工具：教程(Ubuntu 18.04下安装最新CMake及CMake简单使用)若要执行tiny-dnn里面的项目或测试单元，执行以下命令cd tiny-dnncmake -BUILD_EXAMPLES=ON -BUILD_TESTS=.

2022-01-13 13:32:06 764 1

原创【网络仿真】ns-3与物理网络连接

step1 运行脚本src/fd-net-device/examples/fd-tap-ping.cc脚本功能：使用主机上的ns-3仿真模型和节点，ping远程主机。脚本拓扑：//// +-------------------------------------+ // | host |// +-------------------------------------+ // | ns-3 simu

2022-01-07 10:26:25 1408

原创【网络仿真】ns-3版本升级

概述：ns-3版本更新以前只知道重新下载新安装包，新学习了diff和patch文件的使用[1]。发现ns-3从旧版本升级到新版本很方便，不需要重新删除下载安装包。方法（以ns-3.33升级为ns-3.34为例）在已有ns-3.33基础之上，下载文件ns-3.33-to-ns-3.34.patch放入文件夹ns-allinone-3.33下面。在ns-allinone-3.33/ns-3.33中执行命令 patch -p1 < ../ns-3.33-to-ns-3.34.patch

2021-11-26 10:09:02 881 2

翻译【doing PhD】Facebook:26条时间管理秘籍

45678910111213141516171819202122232425 写下杂念26 适度休息不会休息的人，也不会工作（有效休息：睡眠，冥想，运动，弹乐器；玩手机不算）共勉

2021-11-21 15:32:43 138 2

原创【网络仿真】ns-3 tracing系统

1 trace 变量作用：追踪记录某些网络行为（如数据分组发送、接受、丢失事件）或网络指标（如TCP cwnd）。本质：C++类的成员变量，变量类型为函数指针。使用：用户先预定义回调函数callback，再通过tracing系统将回调函数与C++对象内部的函数指针（trace变量）相关联。发生特定网络事件时，ns-3调用对应trace变量，从而触发回调函数，模拟数据通过回调函数参数列表形式传递给脚本2 trace 变量配置2.1 Config::Connect()2.2 Helper类2.

2021-11-20 17:27:48 1864

原创【网络仿真】ns-3链路与物理层

1 有线网络：PPP与CSMAns-3目前支持的有线网络底层传输协议有两个：点对点（Point-To-Point, PPP）和载波侦听多路访问（Carrier Sense Multiple Access ,CSMA）。（PPP的握手协议、以太网冲突检测 (Collection Detection) 没有被支持）PPPCSMA源码scr/point-to-pointsrc/scma作用两个结点的点对点分组传输多个结点接入总线网络助手类PointToPointHe

2021-11-20 11:56:37 1712

原创【doing PhD】学术汇报

先介绍背景（实验室，工作）娓娓道来，有交互性有所取舍，让听众有收获提前到，调试设备前人工作和自己工作有明确区分最后调到第一页听找key point

2021-11-19 20:21:49 261

原创【网络仿真】ns3-gym/rl-tcp

1 tcp-rl.h/cc2 tcp-rl-env.h/cc3 test_tcp.py4 tcp_newreno.py5 sim.cc

2021-09-19 13:54:31 2943 2

原创【网络仿真】ns3-ai 安装 & 介绍

1 IntroductionYin, H., Liu, P., Liu, K., Cao, L., Zhang, L., Gao, Y., & Hei, X. (2020). ns3-ai : Fostering Artificial Intelligence Algorithms for Networking Research. Workshop on Ns-3 – WNS3 2020, 57–64. 知乎解读ns3-ai是对ns3-gym的改进，实现了内存共享，进程间通信（IPC）速度比

2021-09-13 16:43:47 2696 9

原创【网络仿真】ns-3基础（下）

6 ns-3其他模块6.1 网络模块分组：传递的消息，模拟器基本对象。ns-3中每个分组包括一个字节缓冲区和一个Tag列表，通过Header类和Trailer类对缓冲区数据进行添加和删除。6.1.1 分组6.1.3 分组接口分组对象的公共成员函数// 1. 构造函数Packet();//用新的uid创建一个空分组，返回getuidPacket(uint32_t size);//size为0填充的有效载荷大小// 2. 添加或删除缓冲区数据void Add (Header const &

2021-09-12 22:03:49 2438

原创【网络仿真】ns-3基础（上）

目标：看完《ns3》，重点：如何写拓扑、模块1 ns-3初识资料：ns-3官网：http://www.nsnam.org/ns-3官方开发文档：https://www.nsnam.org/releases/ns-3-34/documentation/ns-3维基百科（文档中没有的内容）、FAQ问题解答：https://www.nsnam.org/support/ns-3相关文献：https://www.nsnam.org/education/2 ns-3快速上手使用waf配置编译ns-3

2021-09-11 14:28:53 4522 4

原创叔本华《作为意志和表象的世界》

生活在这一世界里，一个拥有丰富内在的人，就像在冬月的晚上，在漫天冰雪当中拥有一间明亮、温暖、愉快的圣诞小屋。为克服困难、阻碍而努力奋斗是人的一种需要，这道理跟钻洞之于土拨鼠为必不可少是一样的。人的幸福处境犹如一些小树林：从远处看过去,这些小树林显得很美；但靠近距离或者走进树林中以后，原先的那种美感就消失了。...

2021-09-11 11:25:05 311

原创【论文阅读】2021年9月6日

35 Classic Meets Modern: a Pragmatic Learning-Based Congestion Control for the Internet

2021-09-06 15:24:54 541 1

原创【网络仿真】2021年9月5日

github上克隆项目太慢解决办法首先将github上的项目Fork到自己的github仓库复制自己仓库里的下载地址在码云(gitee)上新建仓库，在最下面点击导入已有仓库，github地址黏贴进去,创建仓库然后在地址git clone码云上的仓库地址Pytorch安装（from source）# 安装依赖conda install astunparse numpy ninja pyyaml mkl mkl-include setuptools cmake cffi typing_exten

2021-09-06 08:31:06 117

原创【07综述】Bridging machine learning and computer network research: a survey

1 整体框架2 拥塞控制ML+TCP congestion control ->improve the network performance, for example:classify congestive and non-congestive lossJayaraj, A., Venkatesh, T., Murthy, C.S.R.: Loss classification in optical burst switching networks using machine lea

2021-07-09 20:42:11 174 3

转载【学术科研】2001年蒲慕明教授写给他实验室学生的信

lab members:Over the past several months, it has become clear to me that if there is no drastic change in the lab, Poo lab will soon cease to be a productive, first-rate lab that you chose to join in the first place. Lab progress reports over the past six

2021-06-24 19:26:49 376 1

空空如也

空空如也