- 博客(28)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 keras class_weight和sample_weight的区别，tf.data.experimental.make_csv_dataset怎样使用sample_weight
可以在dataset=tf.data.experimental.make_csv_dataset()读入数据后，使用如下代码处理，处理后的dataset中的数据为元组(feature,label,sample_weight)，model.fit()支持这种3元组tf.data.dataset数据集类型作为输入。sample_weight：对每个样本加权，当数据源类型为tf.data.dataset数据集时，使用model.fit函数不支持sample_weight参数，需在处理样本集时处理。
2023-11-07 15:14:00
211
原创 Keras中model.evaluate() 返回的是 loss value 和 metrics values
是指model.compile()里面metrics=后面的值，evaluate()返回值顺序也与其一致。（例如，['AUC', , 'accuracy']）。.evaluate() 返回的是。
2023-10-24 16:35:27
600
原创 [predictions must be ＞= 0] [Condition x ＞= y did not hold element-wise:] [x (sequential/dense_2/Sigm
除了检查网络的最后输出是否没有。
2023-08-04 15:33:35
155
原创 TensorBoard使用记录
TensorBoard不需要额外安装，TensorFlow安装时已包含TensorBoard。启动命令：tensorboard --logdir=logs。可访问，--port可以自己指定端口号。默认端口6006，浏览器输入。
2023-08-03 14:46:21
426
原创 tensorflow keras 关闭打印warning
设置为'3'，这将禁用TensorFlow的所有警告信息。os.environ部分一定要放在import tensorflow之前，我用的是tensorflow2.3，不加tf.get_logger().setLevel('ERROR')也会不生效。用下面代码设置TensorFlow的日志级别为ERROR，以及将环境变量。
2023-06-30 15:15:03
442
原创 复制conda文件夹怎样配置conda环境
配置环境变量可以通过修改~/.bash_profile或者~/.bashrc或者/etc/profile，在末尾加上下面代码。然后source 刚才修改的文件，echo $PATH就会发现多了刚才加的conda路径，之前的conda环境也能用了。修改vim /usr/local/miniconda3/bin/activate。修改vim /usr/local/miniconda3/bin/conda第一行。
2023-05-30 15:07:51
428
原创 linux crontab 使用conda env 运行 python脚本 不生效 怎么解决
终于找到了程序报错的详细信息，提示库没安装，说明cron用的python路径不对，在python脚本文件的第一行，写明pythoh的路径，#!/root/miniconda3/bin/python，还是报同样的错误，说明conda env环境没激活。写了一个python脚本，想每天定时运行，但是任务一直没有开始，脚本里的都是绝对路径，命令行是能正常运行的，查阅各种资料一步步排查。3.怀疑系统时间不对，date命令看系统时间也是对的，还是改为1分钟执行一次测试一下。可以正常运行了，最后改为每天9点30运行。
2023-04-11 09:43:12
1143
原创 FM xlearn实战
xlearn文档：https://xlearn-doc-cn.readthedocs.io/en/latest/python_api/index.htmlimport xlearn as xl# Training taskffm_model = xl.create_ffm() # Use field-aware factorization machine (ffm)ffm_model.setTrain("./small_train.txt") # Set t
2021-07-14 09:48:44
725
原创 word2016 列表目录不能自动编号 出现数字必须介于1和600之间
好好的word总出现这样那样的问题，折腾了好久总算是弄好了原文链接 感谢知乎大佬Sub repair()For Each templ In ActiveDocument.ListTemplatesFor Each lev In templ.ListLevelslev.Font.ResetNext levNext templEnd Sub 1.点击菜单栏“视...
2018-10-25 20:47:56
22650
18
原创 python2字符编码
# bytes object b = b'n02509815' # str object s = "example" # str to bytes编码 str.encode(s)#此时和b相等 # bytes to str解码 bytes.decode(b)#此时和s相等
2018-04-17 14:24:25
204
原创 ParserError: Error tokenizing data
csv文件默认的是以逗号为分隔符，但是经常混入中文逗号，这样在读取csv进行数据处理时，一定记得加上一个参数delimiter：pd.read_csv('D:/datasets/test.csv', sep='，')这里的逗号是中文逗号即可...
2018-03-31 17:12:20
20159
原创 机器学习
为了强化和巩固机器学习知识，发现了一个比较赞的开学资源文档：http://ml.apachecn.org/mlia/svm/视频：https://www.bilibili.com/video/av14808221?from=search&seid
2018-03-19 22:48:53
242
原创 matplotlib.pyplot绘制柱状图
条形图能够很好的反映不同类别的多组数据的数据特征，在我的实验中也经常用来分析数据的分布，而且使用matplotlib.plt也非常简单，下面是一个简单的示例import matplotlib.pyplot as pltsize = 5x = np.arange(size)a = np.random.random(size)b = np.random.random(size)c = n...
2018-03-19 20:17:44
2721
原创 jupyter notebook命令行无法正常启动
当jupyter notebook出现SyntaxError: invalid syntax错误Traceback (most recent call last): File "/usr/local/bin/jupyter-notebook", line 7, in <module> from notebook.notebookapp import main File ...
2018-03-15 09:45:55
10737
1
原创 Keras模型可视化
python2安装graphviz模块 sudo pip install graphviz安装graphviz软件 sudo apt-get install graphviz安装pydot模块 sudo pip install pydot==1.1.0 #只能装1.1.0版本，因为最新版（截止2016.8最新版本号是1.2.x）中find_graphviz函数是deprecate...
2018-03-05 21:34:15
323
原创 常见的数据归一化方法
常见的数据归一化方法有min-max标准化 和 z-score 标准化 min-max标准化对原始数据的线性变换 使结果落到[0,1]区间 x* = (x - x_mean)/(x_max - x_min) 将数据映射到[-1,1]区间，或者x* = x* * 2 -1z-score 标准化最常见的标准化方法就是Z标准化，也叫标准差标准化。要求原始数据的分布可以近似为高斯分布，否...
2018-03-05 14:59:56
1374
原创 numpy设置输出精度
使用set_printoptions设置输出的精度import numpy as npx=np.random.random(10)print(x)# [ 0.07837821 0.48002108 0.41274116 0.82993414 0.77610352 0.1023732# 0.51303098 0.4617183 0.33487207 0.71162095...
2018-03-05 13:48:22
37721
8
原创 静态模型、动态模型
静态模型-离线训练易于构建和测试-使用批量训练和测试，对其进行迭代，直到达到良好效果仍然需要对输入进行监控模型容易过时动态模型-在线训练随着时间的推移不断为训练数据注入新的数据，定期更新同步版本使用渐进式验证，而不是批量训练和测试需要监控、模型回滚和数据隔离会根据变化作出相应调整，避免了过时问题学习谷歌机器学习速成...
2018-03-04 19:31:53
13306
原创 谷歌机器学习速成课
谷歌开放了机器学习速成课，对于不能上外网而又求知若渴的同学，感谢量子位提供了以下链接来方便大家原地址：https://developers.google.cn/machine-learning/crash-course/量子位：https://mp.weixin.qq.com/s?__biz=MzIzNjc1NzUzMw==&mid=2247495096&idx=1&sn=...
2018-03-04 16:00:57
1032
原创 python 理想滤波 巴特沃兹滤波 高斯滤波
网上matlab的图像处理资料非常丰富，python作为一个流行的脚本语言，也具备图像处理能力，其丰富的第三方库为科学计算提供了很大便利，在图像分析领域也有强大的openCV接口来支撑，下面是用python借鉴实现的几种常见的频率滤波器# coding=utf-8import cv2import numpy as np'''opencv 理想滤波、巴特沃兹滤波和高斯滤波的高通、低通滤波演示
2018-01-19 12:57:04
11536
2
转载 机器视觉、图像处理、机器学习领域相关代码和工程项目和数据集 集合
知乎上看到一篇总结：https://zhuanlan.zhihu.com/p/20787086
2018-01-17 16:24:22
1033
原创 理解python yield
普通的迭代对象所有数据都在内存中，如果数据海量的话将会非常耗内存；生成器函数被调用后，其函数体内的代码并不会立即执行，而是返回一个生成器。当返回的生成器调用成员方法时，相应的生成器函数中的代码才会执行迭代如果可以从一个对象中，逐个地获取元素，那么就说这个对象是可迭代的#列表是可迭代的，类似的还有字符串、文件等for i in [1, 2, 3, 4]: print(i)
2018-01-12 11:05:10
184
原创 python自动机器学习工具TPOT
官方文档：http://rhiever.github.io/tpot/github地址：https://github.com/rhiever/tpot使用遗传算法进行特征选择和算法模型选择，仅需几行代码就能生成完整的机器学习代码。
2018-01-11 20:26:07
2413
原创 shell:文件显示命令cat、more、less、tail
cat命令用来显示文件的内容，打印到标准输出设备一般格式：cat [选项] 文件为了控制滚屏：可以按Ctrl+S键，停止滚屏；按Ctrl+Q键可以恢复滚屏。按Ctrl+C（中断）键可以终止该命令的执行示例：#cat m1more命令分屏显示一般格式：more [选项] 文件满屏后停止：按Space键，显示文本的下一屏内容。按Ent
2017-12-20 11:35:47
896
原创 卷积神经网络的特点
卷积网络在本质上是一种输入到输出的映射，它能够学习大量的输入与输出之间的映射关系，而不需要任何输入和输出之间的精确的数学表达式，只要用已知的模式对卷积网络加以训练，网络就具有输入输出对之间的映射能力。特点CNN一个非常重要的特点就是头重脚轻（越往输入权值越小，越往输出权值越多），呈现出一个倒三角的形态，这就很好地避免了BP神经网络中反向传播的时候梯度损失得太快。卷积神经网络CNN主
2017-12-18 14:28:34
16267
原创 卷积神经网络之 fine-tuning
卷积神经网络之 fine-tuningfine-tuning就是使用已用于其他目标、预训练好模型的权重或者部分权重，作为初始值开始训练 • 复用相同层的权重，新定义层取随机权重初始值 • 调大新定义层的的学习率，调小复用层学习率
2017-12-18 14:21:50
832
原创 对抗攻击
Ian Goodfellow结合自己的工作对对抗攻击做的8点说明 Deep Learning Adversarial Examples – Clarifying Misconceptions
2017-12-09 22:32:47
1502
转载 欢迎使用CSDN-markdown编辑器
欢迎使用Markdown编辑器写博客本Markdown编辑器使用StackEdit修改而来，用它写博客，将会带来全新的体验哦：Markdown和扩展Markdown简洁的语法代码块高亮图片链接和图片上传LaTex数学公式UML序列图和流程图离线写博客导入导出Markdown文件丰富的快捷键快捷键加粗 Ctrl + B 斜体 Ctrl + I 引用 Ctrl
2017-12-07 15:44:25
203
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人