ChuckieZhu-CSDN博客

原创 Python神经网络学习(七)--强化学习--使用神经网络

前面说到了强化学习，但是仅仅是使用了一个表格，这也是属于强化学习的范畴了，毕竟强化学习属于在试错中学习的。但是现在有一些问题，如果这个表格非常大呢？悬崖徒步仅仅是一个长12宽4，每个位置4个动作的表格而已，如果游戏是英雄联盟，那么多的位置，每个位置那么多的可能动作，画出一个表格简直是不可想象的。但其实，如果把这个表格看作一个数学函数，他的输入是坐标，输出是一个动作（或者每个动作对应的价值）：那也就是说，只要我们有一个坐标，得到一个动作，中间什么过程是可以不用管的，还记得。

2023-07-01 11:52:18 1875 1

原创被抄袭声明

他对我的MATLAB入门系列文章大量抄袭，图片文本大量复制，我已经联系人工客服，希望工作人员能对他抄袭的文章进行删除处理。他的文章太多，我也懒得一篇一篇找了，只举报这两篇网友提供给我的文章。明眼人一看就知道我被抄了。

2023-06-13 10:35:55 16545 30

原创 Python神经网络学习(六)--机器学习--强化学习

强化学习是Reinforcement Learning，我也不知道为什么把Reinforcement翻译成强化，按照我的英语水平，inforce（应该是通enforce)是强迫，re-代表又，就是一再强迫，就是强迫一个东西一遍又一遍的学习。这也突出了强化学习的本质：一遍又一遍。就好像小时候我们玩红白机，super mario的时候，一遍又一遍的玩，我们玩那个游戏的过程就可以成为强化学习的过程。今天带来精确计算的悬崖徒步强化学习。

2023-05-11 15:33:27 2020 1

原创 Python+Selenium做到浏览器所见即所得（全网最简单教程）

Python+selenium做到所见即所得，看见什么就能做什么！小工具赶快收藏吧！

2022-11-04 10:02:33 1098

原创 T-Pot安装教程（保证能运行，附安装需要的所有东西清单）

前言前一段时间做项目需要安装T-Pot，但是总是碰到各种各样的问题，造成T-Pot某些页面无法访问或者其他的不可知的问题。这么久之后，终于弄出来了一个相对比较好的解决方案，已经测试可以使用，在这里记录一下，防止后来人踩坑，保证看了这篇博客下载东西后，半小时内安装完成！安装T-Pot东西准备下载准备好的docker镜像：docker镜像链接（百度网盘）（复制访问，不是超链接）：链接：https://pan.baidu.com/s/1W3npEAKVyHFq2ZCQ619cAw提..

2021-10-21 17:05:06 2045 12

原创 Python神经网络学习(五)--机器学习--简单的神经网络

前言抱歉时隔这么久再讲神经网络的内容，希望大家还没忘记第二期的内容：分类器是什么东西？https://blog.csdn.net/qq_38431572/article/details/117199679第二期讲的是分类器，而上一期（第四期）的线性回归讲的是预测器，如果大家把概念搞混了，可以去第一期再回顾一下，上面的文章都是3-5分钟的阅读量。前面回顾在第一期中已经讲过，代码中神经元就相当于一个小的功能函数，那么当很多个神经元组合起来，就能完成很多的事情了。多层次的神经网络就是利用每个.

2021-09-19 16:06:53 2140 2

原创 Python神经网络学习(四)--机器学习--线性回归

前言终于感觉我对这一章的理解比较深刻，并且也写出了像样的代码实现供大家参考，感觉自己可以写这篇文章，大家久等了。线性回归什么是线性回归？线性回归常用于连续值的预测任务，最经典的例子就是：假设工资水平仅仅和工作时长有关，那么我们要找到一条直线，虽然这个直线不能穿过所有的样本点，但是能在误差尽量小的情况下给出一个预测，如下图所示：而得到这个直线之后，我们就可以输入工作年限，然后通过计算得出一个大概的工资，虽然跟实际拿到的工资并不一定一致，但是也能给出一个大致的估计。线性模型很容易

2021-09-12 12:25:15 1721 3

原创 Python神经网络学习(三)--机器学习--西瓜书学习笔记

前言最近跟老师学习西瓜书，正好和之前的学习路程重合，便结合在一起更新，也建议大家跟着看看机器学习的内容，根据我的理解（不一定对），学习路线应该是：机器学习->深度学习（包含神经网络）那么今天从西瓜书的绪论开始吧，我会尽量把我学到的以及书上难懂的讲清楚。一起加油！！我不会直接系统说大量的定义，而是在文章中慢慢渗透进去，慢慢理解。机器学习什么是机器学习？根据百度百科的定义：是专门研究计算机怎样模拟或实现人类的学习行为，以获取新的知识或技能，重新组织已有的知识结构使之不断改善

2021-08-11 10:39:34 1222 1

原创 TPOT网络蜜罐安装——保姆级教程（一个人的血泪史）

前言：最近需要安装一个TPOT网络蜜罐，看网上教程太少或者我使用了不可行，受了俩星期的折磨后，由于不可抗因素需要重新安装，记录一下，防止后来人踩坑。我的环境：WINDOWS10 VMware Workstation 16 Player Debian10.10 XSHELL如果有需要的东西，我会放入百度网盘，供大家下载。安装过程：环境准备：VMware Workstation 16 Player安装：不需要破解，官网有免费版的，直接去官网下载正版VM即可。（如果你...

2021-07-20 17:32:33 5019 10

原创 Python神经网络学习--神经网络知识先导（二）--分类器是什么东西？

回顾上期正式开启了神经网络的内容，讲了很少的东西，感谢大家的点赞评论收藏。上期中我们做了个例子：一个单独的神经元，输入摄氏度，输出华氏度。在模拟的神经元中，输入一个确定的摄氏度值后，得到的华氏度的输出不一定和真正的对应华氏度一样，所以，准确来讲，上期讲到的神经元属于预测器！前言预测器和分类器并无太大区别，但是找例子确实不好找。520那天，我看到了自己家院子里的月季，想到有一部分人确实不知道怎么区分玫瑰和月季以至于情人节买的玫瑰花实际上都是月季花，这次，就以这个的分类来讲一个分类器的例子吧

2021-05-23 22:01:52 3154 23

原创 Python神经网络学习--神经网络知识先导（一）--什么是神经网络？

前言沉寂了这么久，原本说发布一个go语言无框架建站教程，结果发现由于这一年没怎么看go语言，go的工程模式貌似有了新的变化，再加上联系了导师，导师让我学习神经网络的知识，所以索性先把go语言建站的日程推后，先行学习神经网络再说。一如既往，我的目标仍然是让你看了之后就能和别人讲。今天，就先看看神经网络的基本概念，对它有一个初步的了解吧。（前几篇可能是理论知识多一点，后面再实操）什么是神经网络？这里不会对这一概念进行解释，让我们一步一步去理解这个神秘的东西。神经元？函数？生物中的神经

2021-05-09 23:00:15 5643 29

原创脚本之家未授权转载我的文章，希望大家帮忙举报一波。谢谢大家

脚本之家未授权转载我的文章，希望大家帮忙举报一波。谢谢大家我最近在准备考研复试，等到复试完继续更新新的内容。脚本之家的连接：https://www.jb51.net/article/186953.htm

2021-03-22 18:32:55 1224 15

原创 MATLAB新手简明使用教程（十一）——三维中的数据可视化，使用matlab绘图——新手来看，保证看懂

今日目标上一讲介绍了二维的画图以及一个函数 plot() 的详细介绍，今天看matlab中三维绘图。今天我们会学会如何在matlab中绘制简单的三维图像，以及理解一些常用函数。开始啦三维中有plot()吗？在三维画图中，有对应的 plot3() 函数用于画三维空间中的图像，但是，我们回忆一下plot是如何工作的：plot接收的参数是矩阵（或者说数组），然后根据传入的参数画点，使用直线把点连接起来，如果点足够密集，展示出来后，在我们眼睛看来，画出来就是一个曲线。下面我们看一个对

2021-02-01 22:04:36 14902 22

原创单片机串口接收字符串（附带工程，免费下载，亲手编写，测试可用）

写在前面最近接了个项目，需要用到单片机接收字符串，第一时间去百度查看相关代码，但是翻来翻去代码都是一样的，要么极度麻烦，要么不能用，于是自己写了一个相关代码工程，在这里写一下如何使用，并且提供源工程代码（无需积分，关注我即可下载），点击这里去下载。工程测试环境WIN10STC-ISP串口助手STC12C5A60S2单片机最小单片机系统套件晶振是11.0592MHz测试结果在双机通信情况下，每两次消息间隔最低为50ms，即可正常识别，测试结果如图（未丢失任何数据）。

2021-01-27 10:53:53 2037 10

原创原创 MATLAB新手简明使用教程（十）——二维中的数据可视化，使用matlab绘图——新手来看，保证看懂

写在前面：很抱歉，让大家等我这么久，从今天开始，一周左右更新一次，由于家里面事情比较多，所以大家多多包涵。从今天开始，让我们继续一起学习吧。我的电脑环境Win10家庭版+MATLAB R2016a+AMDR7M445知识回顾：上一讲我们讲了一些初步的画图知识，今天继续这个博客讲，某些部分可能在前面提过一点，如果讲重复了，大家权当复习啦，嘻嘻^.^今天目标：画一个图像并且给图像加上标题首先我们画一张很简单的图形，比如就画一个y = cos x 的图像吧。代码如下：

2021-01-26 11:32:40 8468 10

原创 MATLAB新手简明使用教程（九）——二维中的数据可视化，使用matlab绘图——新手来看，保证看懂

前期回顾：上期我们学习了如下的内容：学习了二重积分的概念，以及应用的大概场景。学会了如何在一个figure里面绘制多个图像学会了如何在matlab中绘制图像、对目标区域填充颜色并命名标题学会了怎么使用matlab的integral2计算二重积分学会了怎么在matlab中声明（定义）一个函数句柄，或者说创建一个多元函数，以及怎么反解某个变量。学会了怎么在matlab中绘制二维曲面的图像。前言：想了好久，觉得三重积分和常微分方程的计算可以先搁置以下了，讲太多数学知识仿佛就进入了

2020-07-11 21:07:47 14008 11

原创 MATLAB新手简明使用教程（八）——高级积分运算、二重积分——新手来看，保证看懂

前言：在第本系列第六篇中，我们讲解了一下相对来讲最普通的不定积分和定积分的问题，相信大家对积分已经有了大概的了解了，可是仍有一些小问题，比如如何计算多个变量的积分，比如二重积分、甚至三重三重积分呢？本讲中，我将做详细讲解。本期内容首先复习一下一元的定积分、然后讲解二重积分和三重积分。复习定积分（单变量）在之前，先复习一下之前学习的内容。使用matlab求解定积分的步骤大概如下：定义符号变量（syms关键字）定义内联函数（inline函数）使用matlab内置函数进行计算定积分

2020-06-29 20:24:20 25209 32

原创我的本科毕业设计--家庭云端智能管家--把思路和技术细节写给大家分享

前言想写这篇文章好久了，写写删删好多次，总觉得写不出来技术水平，用毕业论文的内容又显得太正式，不像一个博客的分享型文章，思前想后，终于决定用今天这个记叙的角度去切入我的毕业设计来介绍。欢迎大家交流讨论。家庭云端智能管家我为什么会设计这个东西？我本科学习的是物联网工程，专业知识学了很多的方面，各种编程语言啊、做网站啊、做界面啊、嵌入式编程等等，本人有幸加入学校实验室，在学校实验室学到了不少东西，于是想把自己大学学到的知识融合起来（至少能用上的知识都用上，也算给自己大学四年一个交待。）P

2020-06-14 20:55:20 6063 30

原创 MATLAB新手简明使用教程（七）——使用matlab建立多项式以及求导，商求导乘积求导等——新手来看，保证看懂。

前期回顾上一期中，我们学了下面的知识：定积分的基本概念和一些简单的几何意义。使用 int 函数计算不定积分。使用 int 函数计算定积分。本期内容本期我打算给大家介绍一下使用matlab对多项式进行的一些基本运算，如求根、求导、四则运算等或者还有其他一些简单的数据分析的内容。正文开始多项式及其建立在运算中我们经常接触到的就是所谓的多项式，比如很常见的一个多项式：这里我们就说这是一个x的多项式，最高次是2次，常数项是3，二次项的系数是1，一次项的系数是2，相信这些大家都知

2020-06-06 18:12:47 14981 10

原创 MATLAB新手简明使用教程（六）——使用matlab求解定积分和不定积分的问题——新手来看，保证看懂。

前期回顾上期的教程虽然简短，但还是有点东西的，上一节中，我们学习了下面的知识点。在matlab中定义矩阵：A = [1 2 3; 2 3 4; 3 4 5]，每行元素空格隔开，两行之间使用分号隔开。线性代数矩阵乘法运算、求解知识。乘法时注意行列的数量，要前列=后行才能相乘。且AB不一定等于BA（还是有可能相等的，所以用不一定）关于矩阵乘法左除、右除的区别。AX=B，求X用左除，XA...

2020-04-28 21:32:59 29593 19

原创 MATLAB新手简明使用教程（五）——使用matlab求解线性方程组——新手来看，保证看懂。

前期回顾在上期教程中，我们学习了下面的知识点：如何声明、定义、调用函数（文件）。给函数传递参数、接受函数的返回值。 matlab中矩阵的简单使用和下标索引。给我们代码模块化。 matlab中for循环（遍历）的使用。如何从一个文件调用另一个函数文件。本期目标：在数学中经常遇见的一个问题就是方程求解，特别是线性代数中，很经常遇见线性方程组的求解问题，今天就来用Matla...

2020-04-17 20:10:25 25786 17

原创 MATLAB新手简明使用教程（四）——斐波那契数列——新手来看，保证看懂。

前期回顾在上一篇我们学习了下面的知识点：使用roots函数求一元二次方程的根。使用solve函数求方程的根。使用inline函数和ezplot函数一起绘制函数图形。使用 fzero 函数和 plot 函数绘制某一点处的零点。前言斐波那契数列是一个很有趣的数列，有趣的地方在两点，在说这两点之前，我们先来看看斐波那契数列的前几项：1 1 2 3 5 8 13 21 34...

2020-03-30 21:39:47 32482 41

原创 MATLAB使用教程（三）——慢慢练手做项目啦——新手来看

·前言在上一篇文章中，我们学习了在matlab中对外输出格式化字符串在文件中编写调整matlab的字符编码格式编写代码时的一些小提示本讲开始这一讲我们以科学计算开始，使用matlab计算精确度很高，我们可以尝试来计算一下黄金分割率（定义大家可以自行百度一下，这里就不再说了）：计算黄金分割率的公式是：如果使用加法，得到的是1.618........，如果使用减法...

2020-03-28 21:27:20 46912 52

原创 MATLAB使用教程（二）——在文件中编程——新手来看

·前言在上一篇文章中，我们学习了如何调整自己的工作区使用matlab时的注意事项，比如不能按CTRL+Q 语句后面加分号，不是交互式，不加分号，会同时打印结果，即交互式。字符串使用单引号才可以。变量赋值不需要提前声明，随时使用。 clear清除变量，clc清除屏幕。 who和whos查看我们已经拥有的变量的各项树形。类型强制转换。·本讲准备把matlab编码调整...

2020-03-11 11:27:04 68829 77

原创使用JS（watermark）给HTML页面添加文字水印（全网最简单，最详细，复制即用，提供源码链接）

前言：最近在做项目，PD提需求让做一个页面水印，百度到的答案好像大部分都是图片的，要么七七八八的，百度了好久，现在总结出来了这个精简中的精简版的教程，与大家分享。（源码下载链接在文章末尾，如果不想看可以直接至翻到末尾。）分析需求：PD需要的是整个页面布满水印，那么可以确定三件事情：我们加载页面后就要把这个水印填在页面上需要根据页面大小，动态跳转页面上水印数量，防止某些人缩小刷新...

2020-01-17 17:05:09 11494 3

原创在自己服务器(ubnutu 16.04)上搭建docker开发环境(ubuntu16.04)实录（解决中文乱码问题以及各种问题）

我的环境：服务器环境：ubuntu 16.04准备安装的docker环境：ubuntu16.04安装docker:参考链接：菜鸟教程——docker安装我是根据这个连接安装的docker，亲测无误，但是下面的问题，本人踩坑踩了两天才踩完（手动微笑.jpg），这里记录一下，给后来的人才铺路拉取镜像：docker的镜像需要从网上拉取，拉取之后，在这个镜像(image)的基础...

2020-01-02 16:21:54 406 2

原创 Go语言安装tensorflow教程（亲测能用，解决 cannot find 包的问题）

我在安装tensorflow (go语言)时，按照官方教程来，发现有错误，经过几位外国友人的知道，解决问题，现贴出这个坑，供大家借鉴学习。安装tensorflow这里直接参考官方链接，记住，tensorflow的c语言版本也要安装，才能使用，并且安装位置最好使用教程里的位置。问题来了：我们执行到这一步时：go test github.com/tensorflow/tensor...

2019-12-23 19:42:56 2342 1

原创算法题：一排硬币，每个硬币的面额是随意的正整数，从两端任意取，怎么取到的面额最大（你看了能给别人讲）。

题目：一排硬币，每个硬币的面额是随意的正整数，共有n个，现要求，设计一个算法，从两端取硬币，取a个（a小于n），只能从两端取，问怎么取才能使我们取道的硬币总金额最大。...

2019-12-20 15:29:07 1165 3

原创全文搜索引擎ElasticSearch弹性搜索教程（二）简单插入数据(使用bash脚本语言)

前言：上一次讲了怎么安装，今天就来创建个数据库来个简单搜索吧！启动ES进入安装目录下，使用如下命令：./bin/elasticsearch -d注意：目录结构如下：目录不要进错了，相信大家有基础都没问题！可选步骤：使用下面的命令查看是否启动成功：tips建议大家在其他地方新建一个文件夹，放置我们写的bash脚本文件如果没有curl，可以使用apt安...

2019-11-29 15:55:16 687

原创全文搜索引擎ElasticSearch弹性搜索教程（一）安装和简单搜索

最近在做一个项目，亿级的搜索量，文本模糊匹配的需求下，MySQL终于跑不动，每次查询都需要花费很长的时间，只得更换搜索引擎，从前辈出了解到了ES搜索引擎，便去学习，学习过程中发现ES太强大了，便边学边做教程，大家一起学习，评论区一起交流。下一篇：全文搜索引擎ElasticSearch弹性搜索教程（二）简单插入数据(使用bash脚本语言)安装如果跟着我的教程走，建议我们使用同样的版本，这...

2019-11-28 20:29:00 571 2

原创 JS保存数据到本地文件(普通文件和excel文件)——普通文件使用blob实现（excel自己写格式）——代码详解

今天做项目，有一个页面是从后台请求数据，如果想下载，那么就手动点击下载数据，可是如果两次都从服务器请求数据，有点浪费服务器资源，所以干脆就直接把数据保存在本地浏览器，然后点击后保存到本地（前面是普通文件，如果想看excel请直接跳到后面）。那么问题来了：怎么保存？先贴代码：function downLoadDataToLoc() { var saveDatas = g...

2019-10-22 18:29:09 9953

原创 Django中使用distinct无法去除重复数据（已经解决）

今天需要使用Django查询一列的字段（不含重复），搞了一上午，发现这样的事情：如图：得到的数据几乎是相等的，没有区别。但是仔细看会发现：下面的数据比起上面的还是少了一个。解决办法：django的distinct在使用之前必须先使用order_by方法排序，如图：这样就完美解决了这个问题。...

2019-10-22 14:00:01 7491 4

原创 python3的DJango中给分页数据Json序列化中文乱码解决方案。

本人项目环境：python3.6.5, django 2.1最近在做一个项目，无奈人手少，只能把我当作全栈开发来用，在进行前后台交互时，DJango查询到的分页数据进行Json序列化，使用from django.core import serializers进行序列化时发现中文变成了Unicode字符（图中有本人QQ，不要加我，不会统一的），前端接收到之后也是这个数据。百度到...

2019-10-20 11:21:21 570

原创 Ubuntu 16.04 安装Docker 容器——小白踩坑记，有很多错误，都有解决方法

最近学习Docker，结果踩了很多坑，特此记录一下，防止后来的优秀的人被绊倒，下面就开始了：我的机器：16.04的Ubuntu机器。要求：联网！！！开始！！！！下面依次执行一系列命令：先升级一下：sudo updatecurl -sSL http://acs-public-mirror.oss-cn-hangzhou.aliyuncs.com/docker-e...

2019-10-16 16:51:43 710

原创 MATLAB使用教程（一）——从零开始，基础，数据类型——新手来看

matlab是一个很强大的计算软件，合理使用会给我们的学习带来极大的方便之处，本人旨在提供一个零基础的matlab学习博文，供大家学习交流。谢谢大家支持。

2019-10-11 17:57:51 400633 68

原创 C语言指针详解——入门C语言指针，初级指针使用。

原文地址：我的个人博客点击查看C语言教程第二弹——指针详解所有学过C语言的人都知道，C语言难在它的指针的使用和理解，今天，我带给大家C语言的指针的教程，供大家学习交流，如果有讲的不对的地方，请给作者邮箱留言（邮箱在底部）。指针是什么？指针是指向某个变量、某个元素、某个对象等的一个值，我们可以浅显的理解为：指针变量中存放了某个变量的地址，*号是寻址的符号。让我...

2019-05-24 11:23:59 1294 3

原创最新微信小程序开发天坑：navigateTo以及redirectTo无法跳转解决办法

如题，控制台没报错，路径也没问题，就是无法跳转，原因是，最新版本的小程序，navigateTo以及redirectTo这两个方法，不能跳转到tabBar中已有的界面，想切换tabBar，只能使用switchTab（）方法，...

2019-05-12 10:25:48 3993

原创 Ubuntu下Django开发的网站的Admin页面没有了CSS样式

最近开发的个人博客上线了，大家有时间可以看一下，在我的个人博客置顶的地方，谢谢正文开始：我的个人博客，上线后，去ADMIN添加文章，却发现他的样式没有了，查了很久，没有解决，最后在群里问，一个大佬讲：是不是Debug关了。我去把DEBUG设置为TRUE，可以了。我去把DEBUG设置为TRUE，可以了。我去把DEBUG设置为TRUE，可以了。我去把DEBUG设置为TRUE，可...

2019-05-03 15:12:45 463

原创腾讯后台开发面试题最后一道面试题题目以及答案：Python链表+大数计算（大数相加，完整代码在文章最后。）

上次面试之后，因为种种原因，没来得及把最后一道题系统地给大家讲解一下，今天有空，就赶快写博给大家分享，谢谢大家的支持！上次面试的链接：2020年毕业生腾讯校园招聘提前批——后台开发——面试经验——分享给大家交流经验。废话不多说，下面进入正题，题目是：使用python3+链表，做数学的相加（大数相加）。这个地方请不要和我抬杠，当然，Python可以计算很大的数据，这个谁都知道，现在是...

2019-03-31 09:42:00 693

原创 Pyhon3的链表的实现（包含遍历，读取，删除，头插，尾插）

还记得上次面试挂在了链表上，记忆忧新，最近特别赶工重新学习了数据结构等一系列知识，恶补自己的基础。今天趁着复习链表的时候，把Python的链表代码详细的讲解一遍。谢谢大家的支持。进入正题，链表是一种数据结构，是一种典型的线性结构。它的存储的方式并不像顺序表那样，是按照顺序一个挨着一个放置的，它的每一个节点（就是存储在其中的一个元素单元）都不是相邻的，所以相对来讲，链表不需要一块完整的内存，但是...

2019-03-27 18:37:04 594