小王做笔记-CSDN博客

kaggle download api 下载数据集步骤步骤安装 kagglepip install kaggle 找到 kaggle 上的账户，点击头像，找到 account ，找到 API 选项点击 Create New API Token ，生成了 kaggle.json 文件将 kaggle.json 文件放入到 .kaggle 文件夹中；注意，.kaggle 文件夹可以通过 everything工具直接搜索出来得到在命令行直接使用 kaggle downloa

2022-05-23 17:38:12 458

原创 python collections 中的常见函数使用，常见数据类型定义

python collections 中的常见函数使用，常见数据类型定义说明：可以直接根据标题进行查找需要使用的数据和函数使用 namedtuple() 定义一个元组使用 deque() 定义队列deque 常用函数总结使用 deque() 完成列表的移动平均操作！常用于数据处理，统计历史信息的变化趋势上。使用 defaultdict() 定义字典(可以含有不存在的键)通过元组列表生成字典：既然是字典类型就会存在 .keys() , .values(), .items()通过集合 set

2022-04-10 16:44:15 810

原创 python中的字典表达式，通过列表生成字典

python 中的字典表达式背景M1：使用两个for循环M2：使用一个 forM3：使用字典表达式M4：通过zip函数完成总体程序 -- 删除有序链表中重复的元素优化1：使用 collections.Counter完成数据频次的统计优化2：通过列表生成式替代循环操作背景列表中的元素充当字典中的 key0 用来充当列表中的 valueM1：使用两个for循环l = [1, 2, 2, 3, 3, 4, 4, 5]dic = {}for k in l: for

2022-04-10 10:25:23 4560

原创 python中判断列表为空，空列表的判断方法

python中判断列表为空，空列表的判断方法背景M1：通过len() 完成列表的为空的判断M2：通过空列表和空列表相等M3：通过 not 空 == True 来判断空列表背景空列表 ≠ 空值Nonel = []print(l == None) 因此在下面的条件语句中出现了不符合期望的输出：期望输出 0 但是输出 1l = []if l is None: print(0)else: print(1)结果：1M1：通过len() 完成列表的为空的判断

2022-04-10 09:45:47 7033

原创代码错误记录：TypeError: dropout(): argument ‘input‘ (position 1) must be Tensor, not str

TypeError: dropout（）: argument 'input' （position 1） must be Tensor, not str 背景解决方法整体代码参考链接背景使用 hugging face 中的预训练模型完成文本分类任务的过程中。出现了这个问题。问题排查的过程中，发现这里定义的 cls_layer() 出现问题。问题是数据类型错误，因此需要检查pooler_output的数据产生的位置和输出类型解决方法定位位置，寻找pooler_output的输出这个poo

2022-04-06 11:04:34 12100 1

原创 Pytorch中的 flatten() ，squeeze() 和 unsqueeze() 的区分

@[TOC]( Pytorch中的 flatten() ，squeeze() 和 unsqueeze() 的区分 )解释flatten() 用于将数据展开。squeeze() 用于将数据进行压缩，移除某个维度Compute torch.squeeze(input). It squeezes (removes) the size 1 and returns a tensor with all other dimensions of the input tensor.unsqueeze() 用于将

2022-04-06 10:47:53 1844

原创代码错误记录：ImportError: cannot import name ‘ObjectWrapper‘ from ‘tqdm.utils‘

代码错误记录 cannot import name 'ObjectWrapper' from 'tqdm.utils' 错误原因方法：更正错误效果错误原因Importerror错误：也就是导入库发生错误方法：需要查找库的版本和内置函数，如果找不到解答，就看官网上的调用例子。官网上的 tqdm 中有使用到：（官网： https://pypi.org/project/tqdm/ ）这个地方和我们需要使用的情况是一样的，因此可以判断是库的版本出现问题更正错误!pip insta

2022-04-05 14:18:17 1071

原创 Go语言学习-- No.11结构体--匿名结构体的应用

匿名结构体的应用会通过自定义匿名结构体将同一类的全局变量组织在一起会使用匿名结构体来临时存储经过解析后的JSON数据：匿名结构体一般可用于组织全局变量、构建数据模板和解析JSON等会通过自定义匿名结构体将同一类的全局变量组织在一起举例：package mainimport "fmt"func main() { // 匿名结构体用于组织全局变量 var config struct { ip string port int } config.ip = "192.168.1

2022-02-21 19:40:14 422 2

原创 Go语言学习-- No.12 结构体-- 匿名结构体的定义和初始化

匿名结构体的定义和初始化匿名结构体的定义和初始化匿名结构体的定义和初始化匿名结构体无须type关键字就可以直接使用，且不用写出类型名称。，匿名结构体在创建的同时也要创建对象。匿名结构体在初始化时需进行匿名结构体定义和成员变量初始化。举例：package mainimport "fmt"func main() { book1 := struct { // 无需事先声明 title string author string num int id in

2022-02-21 19:12:33 960

原创 Go语言学习-- No.11结构体--结构体内嵌

结构体内嵌结构体内嵌结构体内嵌的初始化结构体内嵌Go语言的结构体内嵌是一种组合特性，使用结构体内嵌可构建一种面向对象编程思想中的继承关系。结构体实例化后，可直接访问内嵌结构体的所有成员变量和方法。使用格式：type 结构体名1 struct { 成员变量1 类型1 成员变量2 类型2}type 结构体名2 struct { 结构体名1 成员变量3 类型3}举例：package mainimport "fmt"type Book struct {

2022-01-18 21:01:37 882

原创 Go语言学习-- No.11结构体--结构体方法

结构体方法结构体方法指针类型接收者值类型接收者结构体方法一个方法就是一个包含了接收者的函数。对于结构体方法，接收者可以是结构体类型的值或是指针结构体 = 是通过 type 结构体名 struct 定义的结构体方法 = 函数结构体方法= 结构体名.函数()指针类型接收者当接收者类型为指针时，可以通过该方法改变该接收者的成员变量值，即使你使用了非指针类型实例调用该函数，也可以改变实例对应的成员变量值举例：package mainimport "fmt"type User struc

2022-01-18 20:22:00 808

原创百面机器学习--No.4 模型评估 -- 超参数调优方法

超参数调优方法 Q1: 超参数有哪些调优方法？Q1: 超参数有哪些调优方法？网格搜索穷举出所有参数的搜索值，通过查找搜索范围内的所有的点来确定最优值。这种方法一般会先使用较广的搜索范围和较大的步长，来寻找全局最优值可能的位置；然后会逐渐缩小搜索范围和步长，来寻找更精确的最优值。随机搜索在搜索范围中随机选取样本点，如果样本点集足够大，那么通过随机采样也能大概率地找到全局最优值，或其近似值。贝叶斯搜索贝叶斯优化算法通过对目标函数形状进行学习，找到使目标函数向全局最优值提升

2022-01-17 13:27:59 516

原创百面机器学习--No.4 模型评估 -- 评估方法

模型评估的方法 Q1: 在模型评估过程中，有哪些主要的验证方法，它们的优缺点是什么?在机器学习中，我们通常把样本分为训练集和测试集，训练集用于训练模型，测试集用于评估模型。Q1: 在模型评估过程中，有哪些主要的验证方法，它们的优缺点是什么?Holdout检验它将原始的样本集合随机划分成训练集和验证集两部分。举例： 70% 的样本用于模型训练； 30% 的样本用于模型验证，包括绘制ROC曲线、计算精确率和召回率等指标来评估模型性能。交叉检验k-fold交叉验证：

2022-01-17 13:02:57 1691

原创百面机器学习--No.4 模型评估 -- 余弦距离

余弦相似度余弦距离

2022-01-17 12:49:55 804

原创 Go语言学习-- No.11结构体--初始化结构体

初始化结构体键值对格式初始化列表格式初始化键值对格式初始化使用格式：type 结构名 struct { 成员变量变量类型 ... , ]结构体实例名 := &结构名 { 成员名:初始化值, ... ,}举例：package mainimport "fmt"type Book struct { author, title string num, id int}func main() { book1 := &Book{ ti

2022-01-16 18:29:57 234

原创 Go语言学习-- No.11结构体--实例化结构体

实例化结构体使用结构体的步骤标准实例化使用关键字 new() 完成初始化取地址实例化结构体访问成员使用结构体的步骤定义结构体（ type struct {…} ）实例化结构体（ var 变量名变量类型）使用结构体（使用结构体名.成员对其进行操作）标准实例化格式：var 结构体实例结构体举例：package mainimport "fmt"type Book struct { title, author string num, id

2022-01-16 15:53:54 1078

原创 Go语言学习-- No.11结构体--结构体的理解和定义

结构体的理解和定义结构体的理解结构体的定义结构体的理解自定义一系列由相同类型或不同类型的数据构成的数据集合，用来实现较复杂的数据结构。结构体是一种对现实生活中实体的抽象，结构体由一系列成员变量构成，这些成员变量对应着实体不同的属性。结构体的定义结构体定义需要使用type和struct关键字，使用方法如下：type 结构体名 struct { 成员变量1 类型a 成员变量2 类型b 成员变量3 类型c ....}注意点：结构体名：同一个包内结构体名不能重复。成员名：同一个结

2022-01-16 14:51:45 391

原创 Go语言学习-- No.10 -- 函数---Go内置函数

内置函数内置函数汇总appendcopydeletelencapmakenewcomplex, real, imagclosepanicrecoverprintprintln内置函数汇总append使用格式：新变量 := append(原变量, element1, element2, 等) 新变量 := append(原变量, 数组...) 将数据追加到 slice 的末尾，返回一个 slice。举例：package mainimport "fmt"func main()

2022-01-16 11:20:47 516

原创 Go语言学习-- No.10 函数---函数参数传递的本质

函数参数传递的本质值传递引用传递Go语言参数的传递形式总是值传递值类型变量引用类型变量值传递值传递：将变量的一个副本传递给函数，函数中不管如何操作该变量副本，都不会改变原变量的值。引用传递引用传递：将变量的内存地址传递给函数，函数中操作变量时会找到保存在该地址的变量，对其进行操作，会改变原变量的值Go语言参数的传递形式总是值传递值类型变量对于int、string和bool等值类型变量，传递的是原变量的副本，对副本的操作不会影响原变量。举例：package mainimport "f

2022-01-14 19:00:47 187

原创 Go语言学习-- No.10 -- 函数----defer延时函数

defer延时函数的使用 defer使用方法使用defer用来释放资源defer使用方法defer 任意语句在defer所属的函数即将返回时，函数体中的所有defer语句将会按出现的顺序被逆序执行，即函数体中的最后一个defer语句最先被执行。举例：package mainimport "fmt"func main() { fmt.Println("start now!") defer fmt.Println("第一个defer") defer fmt.Println("第二个de

2022-01-14 13:28:59 171

原创 LeetCodeClassification ---- No.1 分治 --- 快速排序( 递归 )

分治的使用方法：快速排序快速排序pythongo思考向数组中添加元素拼接多个数组快速排序基准条件：只有一个值或者数组为空，不需要快速排序了。递归条件左边放小于基准值的数组，然后对其进行快速排序（使用递归实现）右边放大于基准值的数组，然后对其进行快速排序（使用递归实现）合将快排的数组按照从左到有排起来，实现数组的从小到大排序。python# 快速排序 def quickSort(arr): if len(arr) < 2: r

2022-01-11 20:33:09 383 1

原创 Go语言学习-- No.10 通过定义函数求数组的和，数组中元素个数，数组中的最大值

练习题本次是对之前看完的部分，进行实战，写写代码，练习练习每个任务都使用了两种方法完成求解（递归法，for循环）package mainimport "fmt"func sum(arr []int) int { if len(arr) == 0 { return 0 } else { return arr[0] + sum(arr[1:]) }}func for_sum(arr []int) int { sum_output := 0 for i := 0; i &

2022-01-11 15:34:30 385

原创 LeetCodeClassification---- No.1 分治--分治的工具是递归---使用递归完成找出一维数组中的最大值

使用递归完成找出一维数组中的最大值如果是两个数，我们很容易就清楚，哪个是最大的，哪个是最小的，因此基准条件就是数组中剩下两个元素递归条件：使用函数本身得到暂时的最大值pythondef findMax(l): if len(l) == 0: ## 基准条件 return l[0] if l[0] > l[1] else l[1] max_temp = findMax(l[1:]) ## 递归条件，完成更新 return l[0] if l[0] &gt

2022-01-11 14:07:23 306

原创 LeetCodeClassification---- No.1 分治--使用递归完成对一维数组的求和--递归法完成sum函数

递归函数来一维数组的求和以下内容来自，《算法图解》确定递归停止条件（基准条件）：确定递归条件：整个递归过程python实现# 使用递归完成对数组的相加 def sum(l): if l == [] or len(l) == 1: ## 先设置基准条件 return l[0] else: ## 设置递归条件 return l[0] + sum(l[1:]) ## l[1:] 减少数据尺度，不断往基准条件

2022-01-11 13:24:09 479

原创 LeetCodeClassification---- No.1 分治--分治的工具是递归---斐波那契数列的实现

递归斐波那契数列pythondef fib(n): if n == 0 or n==1: ## 基准条件 return 1 else: ## 递归条件 return fib(n-1) + fib(n-2) def testFib(n): for i in range(n + 1): print(fib(i))gopackage mainimport "fmt"func fib(n int) int { if n == 0 || n =

2022-01-11 10:09:30 226

原创百面机器学习--No.3 模型评估 -- 预测结果的衡量指标和局限性

准确率

2022-01-10 20:54:28 1141

原创 LeetCodeClassification---- No.1 分治--分治例题，求众数

Q1. 多数元素给定一个大小为 n 的数组，找到其中的众数。众数是指在数组中出现次数大于 [n/2] 的元素。你可以假设数组是非空的，并且给定的数组总是存在众数。解题思路：确定切分的终止条件：直到所有的子问题都是长度为 1 的数组，停止切分。准备数据，将大问题切分为小问题递归地将原数组二分为左区间与右区间，直到最终的数组只剩下一个元素，将其返回处理子问题得到子结果，并合并长度为 1 的子数组中唯一的数显然是众数，直接返回即可。如果它们的众数相同，那么显然

2022-01-09 16:24:21 565

原创 LeetCodeClassification---- No.1 分治

分治分治算法的主要思想分治算法的步骤适用的场景满足分治的条件伪代码编程情景Q1. 二分搜索Q：如何编程求出一组数据的有序对个数或者逆序对个数呢？本内容均来自于开源组织 datawhale , 之前一直嚷嚷着要刷题刷题，一直没开始，就今天开始吧！！其他引用，本人会标明出处，侵删！注意：内容中，本人会是用python，Golang 两种语言进行编程，并且对比学习两个语言的联系和区别，如果在能力范围内，可能会尝试使用c++ 来试着做一做！分治算法的主要思想分治 = 分开治理 ≈ 将原问题若干个子问题

2022-01-09 14:16:45 284

最优化理论，cplex20.10，python-cplex 和 python-docplex 相关安装包

最优化理论，matlab-cplex，python-cplex 和 python-docplex 相关安装包。内部含有本人前期收集到的 cplex 安装包；版本包括： cplex12.6.3 ; cplex12.9 ; cplex12.5 ; cplex20.10 应该可以满足大部分人的需求，可供下载使用。因上传限制，进行单个文件上传。用户可以根据自己的需求自行下载，如果没有积分的，可以联系我进行调整积分下载额度。

2023-02-16