自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(24)
  • 收藏
  • 关注

原创 将自己的数据集加载到dataloader中

使用开源算法进行小规模的训练,例如分类任务需要加载自己的数据集和类别,需要使用dataloader格式的数据集。使用自己的数据集来制作成dataloader方便使用

2024-04-23 14:09:18 250

原创 没有磁盘整列下的多机分布式存储:使用rysnc+多服务器文件/文件夹内容同步

科研狗福音:最简化的配置实现多台服务器间数据自动同步!

2024-03-22 23:20:48 829

原创 VS Code 跳板机登录服务器(手打密码+秘钥登录)

使用跳板机登录服务器,可以使用vscode的文件管理。同时介绍了密钥登录方式。并附上了一些问题解决方案

2024-03-22 22:53:53 1058

原创 大模型知识积累——幻觉

在大语言模型的文本生成场景下,幻觉是指一本正经的胡说八道。逻辑连贯的自然表述中,有理论或者事实错误,捏造事实等问题。

2024-03-17 14:57:31 390

原创 大模型技术积累——模型压缩

大模型技术积累——模型压缩:蒸馏、量化、剪枝和分解

2024-03-17 13:14:01 342

原创 QWEN-VL 图文数据标注工具

一种用于qwen-vl的数据集标注工具

2023-12-23 16:46:54 859 5

原创 labelme等标注工具/数据增强工具输出JSON文件格式检查脚本

标注的文件太多了,还有用数据增强工具生成了一票的新数据。在转换或使用训练时候会报错,错误原因是json中语法有问题,这样会中断程序运行,调试造成很大困扰。写一个脚本,用于检查文件夹下所有的json文件是否合规,不合规的记录并输出,然后自己改。检查确实最后有问题,多写了一次。

2023-12-07 22:55:54 697

原创 Labelme2Yolo labelme格式的json标注转yolo格式txt

labelme直接转yolo格式,并按训练要求生成train,val,test

2023-12-07 22:37:14 943

原创 Pytorch部分报错问题

比较暴力的方法是直接重装torch可以解决大部分问题,直接去pytorch官网,安装对应版本的torch,建议使用conda安装,可以直接安装,无需卸载操作。问题报错:undefined symbol: __nvJitLinkAddData_12_1, version libnvJitLink.so.12。可能是直接安装环境时,torch版本和机器上本身安装的cuda版本不符合,或者torch没有完全安装导致。如果是nvidia-smi中,cuda版本为12.0,可以选择12.X版本,都可以使用。

2023-11-14 18:09:28 3647

原创 安装yolo,mmlab,等工具时pycocotools报错

安装yolo的时候,因为是白板机,很多依赖都没有安装。安装yolo的依赖时候会报错。其实如果安装其他的视觉框架,例如yolo v系列,mmlab,faster-rcnn等只要是用到了coco数据集的预置框架,都需要安装pycocotools。conda环境下依赖安装可能报错,可能是因为环境版本不匹配。1.终端跳转到相应环境下。这时候需要进行手动安装。2.终端输入命令如下。

2023-04-09 00:40:47 296

原创 上海交大全球午餐会——大语言模型机器学习ChatGPT(主讲人:赵海)

上海交大周五的分享会3-10场次

2023-03-10 20:08:20 3357

原创 数据分析之Correlation Heatmaps绘制

接下来,介绍我在kaggle中发现使用r语言官方库提供的corr heatmaps的绘制,我很喜欢的风格。软件包的各种花里胡哨的画法在。中详细介绍了如何使用python中的seaborn库来绘制热力图,其热力图效果如下所示。就是通过数据来进行生存率的预测,在数据处理时采用了Correlation Heatmaps的方法。当做数据分析,或者数据挖掘,来做二分类或者多目标分类任务时,需要分析目标和其他数据的相关性。的情况,经过排查,是数据中有缺失值导致的。中,介绍了一种我比较喜欢的风格,大家也可以进行学习。

2023-01-24 00:22:15 544

原创 弱监督学习框架 Detectron2/DRN-WSOD-pytorch 在服务器/windows上配置安装及使用

最近做弱监督学习研究,进行相关分析。发现Detectron2是一个不错的框架,其中也有model zoo相当多种类的预训练模型可以拿来直接用。但是安装配置使用中碰到了许多坑。跟各位小伙伴们分享。。

2022-12-22 16:06:54 507

原创 python test命名函数出错

python学习,test()函数的命名

2022-12-07 13:30:28 254

原创 小学奥赛题(真的很一般)

取奇数位相加

2022-08-25 00:31:08 68

原创 python pip安装报错/ timeout/ conda库安装慢

国内通过pip或者conda安装库的时候经常会报错,很大一部分原因是因为安装超时或者是链接不到源。在网上有针对timeout解决方案Problem:在conda中更新pip,使用命令 python -m pip install --upgrade pip,等待后超时报错解决方案:1.延长等待时间设置使用命令 pip --default-timeout=1000 install -U 库名,其中 = 后接等待数值解决本问题使用的命令为python -m pip --default-t.

2021-03-04 00:24:41 626 1

原创 Linux更新Python3避坑

当安装python高版本时,因为python3.x是内建版本,不能随便卸载❌禁止使用下面命令!❌删除python2sudo apt-get/ remove python❌删除python3sudo apt-get/ remove python❌删除python3.6sudo apt-get/ remove python3.6#以上命令禁止使用,为防止错误输入,已在后面加了/使用remove删除,会照成相关依赖包自动卸载,后果很严重!如果误删,请使用以下补救方案1.确认

2020-07-07 22:12:53 175

原创 Ubuntu更新自带Python3

因为在安装包时,需要在系统中安装pip3配合docker的使用,但python3.5并不适配需要更新在网上的教程两个都试了:1.apt更新#添加python3.6sudo add-apt-repository ppa:jonathonf/python-3.6#更新apt-get listsudo apt-get update#安装python3.6sudo apt-get install python3.6#设置系统自带的python3.5优先级为1sudo updat.

2020-07-07 21:31:58 1161

原创 李彦宏先生的第一次直播

樊登读书与李彦宏的对话首先可以看到,在直播间,到处都充斥着百度的产品,无论是百度水杯,还是海报上的logo,再到桌上摆放的百度智能影响,都是产品流量潜移默化的表现先问了是否叫robby,李先生幽默的说现在越来越多人叫了,很多人叫厂长,李:现在工程师喜欢叫厂长我也不知道为什么,而且也不知道为啥是工厂的厂这是李彦宏先生第一次直播,谈到很少上媒体的为何要做直播直播是一个新的媒体形式比如我想直播室一种满足人们信息的方式,希望更多的人在百度进行直播,直播给搜...

2020-05-21 03:00:47 467

原创 anaconda使用心得

1.安装不同系统的安装方式不同,在mac os系统下,可以在官网下载页面https://www.anaconda.com/distribution/进行下载安装。

2020-04-11 22:59:58 1090

原创 AutoML详解

部分是从外文文献翻译,参考百度而来一、Automl是什么机器学习模型都是由工程师和科学家团队精心设计出来的。这种手动设计的过程是非常困难的,因为模型组件的搜索空间可以非常巨大——一个典型的10层网络模型能有1010种可能的网络。因此,设计网络的过程通常需要花费优秀的机器学习专家大量的时间和经验。为了让设计机器学习模型的过程变得更加简单,谷歌一直在探索自动设计机器学习模型的方法。研...

2019-05-31 11:24:14 12083

原创 VS CODE for Ubuntu16.04安装

周围的麻瓜们都在用VS CODE我看了一下觉得还可以,决定入坑在度娘上搜索VS CODE Ubuntu安装如下Ubuntu16.04下安装VS Code在Ubuntu下面安装Visual Studio Codesudo add-apt-repository ppa:ubuntu-desktop/ubuntu-makesudo apt-get updatesudo apt-get install...

2018-07-11 17:29:51 10416

转载 VS2015 win7下编译提示缺少ucrtbased.dll文件

解决方案:(一劳永逸性方法)方案一中的方案只针对当前的工程项目起作用。另建立一个工程,还会遇到同样的问题,一个一劳永逸的方法是”debug属性页“中设置。第一步:找到”属性管理器“,在”Debug | Win32“上右击,找到属性。如果找不到属性管理器,在视图------其他窗口-------属性管理器。第二步:Debug属性页--------代码生成-----------运行库---------...

2018-03-30 09:00:22 1831

转载 PYTHON-pip安装Ubuntu14.04

直接安装会出现如下按照如下方式安装在Ubuntu14.04上,建议通过下面的方法安装,这是一种通用的方法,也适用于Windows,当然在Windows下手动下载下来就行了wget https://bootstrap.pypa.io/get-pip.py --no-check-certificatesudo python get-pip.py

2017-08-31 09:35:10 220

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除