- 博客(1017)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 pycharm_django_无法调试，无法进入断点
我对PyCharm和Django也有同样的问题。这是由在PyCharm下运行Django的自动重新加载特性引起的。我以管理员的身份运行PyCharm，正如Jithin Pavithran在评论中建议的那样，问题就解决了。您还可以在PyCharm Django服务器配置中启用“No reload”。...
2022-08-04 20:33:40
821
1
原创 google云盘资料大文件下载
20220525转存别人的云盘文件分析链接的快捷方式到自己的google云盘右键点击copy 到自己的google 云盘通过multcloud转存google云盘文件到百度云盘…
2022-05-25 17:39:55
703
1
原创 飞书问题小结
https://blog.csdn.net/Caiqiudan/article/details/122363130飞书文档如何添加代码块 ```
2022-05-13 16:23:03
385
转载 异常值离群值极端值检测_机器学习
通过鉴别故障来检测异常对任何业务来说都很重要。本文作者总结了五种用于检测异常的方法，下面一起来看看吧。什么是异常/离群点？在统计学中，离群点是并不属于特定族群的数据点，是与其它值相距甚远的异常观测。离群点是一种与其它结构良好的数据不同的观测值。例如，你可以很清楚地看到这个列表中的离群点：[20,24,22,19,29,18,4300,30,18]当观测值是一堆数字且都是一维时，辨别离群点很容易，但如果有数以千计的观测值或数据是多维的，你可能会需要更机智的方法来检测这些离群点。我们为什么要关注异常
2022-05-10 16:29:26
1291
原创 arthas_java_性能监控
20220409https://blog.csdn.net/danepk/article/details/120531479arthas安装
2022-04-09 15:28:34
296
原创 oss对象存储服务操作
20220322登陆import oss2import requestsdef oss(oss_save_path, your_img_path): auth = oss2.Auth('LTA_key', 'secret') endpoint = 'endpoint' bucket = oss2.Bucket(auth, endpoint, 'your_bucket_name') bucket.put_object_from_file(oss_save_pat
2022-03-22 17:47:03
854
原创 hive问题小结
20220321lag往下移动lead往上移动hive rank排序的时候注意是否使用缓冲区，如果是的话其他非排序字段会顺序变反
2022-03-21 10:23:10
1277
原创 LTV 即用户生命周期价值
20220318https://xie.infoq.cn/article/950302620f586872808d6c372
2022-03-18 14:29:31
1228
原创 iceberg问题小结
20220314spark要写入iceberg需要一个alluxio-2.7.3-client.jar这个jar包在alluxio下载下来的zip包里面
2022-03-14 16:28:50
2113
原创 linux命令历史
20220228命令历史 15 source /etc/profile 16 vim /etc/profile 17 source /etc/profile 18 scp -r /etc/profile root@k8s05:/etc/profile 19 scp -r /etc/profile root@k8s06:/etc/profile 20 cd spark-2.4.5-bin-hadoop2.7/ 21 ls 22 cd conf
2022-02-28 17:24:06
1821
转载 starrocks问题小结
https://mp.weixin.qq.com/s/C7UzjdAQL9PTNXeSsVRjQA基于StarRocks的极速实时数据分析实践
2022-01-27 16:43:24
418
2
转载 python系统问题
https://mp.weixin.qq.com/s/Bi7f6VwT8DoXbuozlX3PIw限制程序最大内存使用如果程序开发不当，可能会出现占用过多内存的情况。特别是在Docker里面，如果Python程序占用太多内存，可能会导致Docker容器死掉。为了限制Python程序所能使用的最大内存，我们可以使用Python自带的resource模块。首先获取系统默认的内存soft上限和hard上限：import resourcesoft, hard = resource.getrlimit(r
2022-01-27 11:28:40
183
转载 新日志loggru模块
上面的实现方式已经是一个较为可行的配置方案了。然而，我还是会感觉到有些 Handler 配起来麻烦，尤其是新建一个项目的很多时候懒得去写一些配置。即使是不用上文的配置，用最基本的几行 logging 配置，像如下的通用配置：import logginglogging.basicConfig(level = logging.INFO,format = '%(asctime)s - %(name)s - %(levelname)s - %(message)s')logger = logging.getL
2022-01-27 11:17:48
592
原创 doris问题
20220111CREATE EXTERNAL TABLE `tb_onekey_goods_info_manual_match_test` ( `id` bigint(20) NOT NULL COMMENT "业务主键 自增id", `goods_id` varchar(200) NULL COMMENT "商品id", `hz_goods_id` varchar(200) NULL COMMENT "合纵商品id", `goods_name` varchar(200) NULL CO
2022-01-11 17:21:48
2581
原创 各工具官方文档地址
https://docs.python.org/3/library/codecs.html#error-handlerspandas
2022-01-06 13:05:03
660
转载 用户流失定义标准
大家好，我是小z，也可以叫我阿粥图片（我感觉这个听起来酷一些）最近做了一些用户流失、生命周期分析相关的项目（电商领域）。些许实战经验，趁周末和大家聊聊。咳，提前剧透一下文末送两本好书~经常听到有人提起“用户流失”这个概念。有时候出自老板之口，他可能参与了几场业内交流会，听到“拉一个新用户的成本是维护老用户的10倍”，亦或是对于行业流量见顶的焦虑，深感阻止用户流失刻不容缓。有时候出自运营之口，他们觉得花了老大劲儿拉来的用户，总得做点什么，不能让用户白白流失掉。不过更多时候，是KPI没完成，想把锅甩给用
2022-01-05 11:04:59
1507
原创 axmath公式编辑器
要去掉右边的大括号，可以先剪切中间的内容，然后删掉右边的括号之后在粘贴上中间的内容要设置粗体，先选中粗体再选符号符号取半边只能从这里取
2022-01-03 21:06:29
1124
原创 办公word，ppt，excel问题_wps_office
20220103不能往左移动，左边总留有空白时候 先清除段落布局https://jingyan.baidu.com/article/4f34706efa2d39a286b56d5e.html图片对齐浮于文字上方
2022-01-03 20:43:38
279
原创 shell编程_linux
$1第一个参数$i 是循环hadoop102devnull 扔进黑洞nohup 2>&1 & 2是错误日志扔进1标准输出 nohup 和后面的& 是后台运行casefordodoneesacgrep -v xxx 忽略后面的字符print $2 获取第二列的内容xargs -n1 把前面获得到的进程号作为参数传给 kill n1 一次读一行 n2 是一次两行kill -9 ${} 上下两个类似前面获取的结果作为后面的参数反斜杠 转
2021-12-30 22:32:52
320
转载 spark submit参数调优
队列可以理解为所有将要在spark上运行的任务你可以通过spark-submit --help或者spark-shell --help来查看这些参数。使用格式:./bin/spark-submit \ --class <main-class> \ --master <master-url> \ --deploy-mode <deploy-mode> \ --conf <key>=<value> \ # other opti
2021-12-30 13:40:59
227
原创 hadoop问题小结
20211229path does not exist hdfs://k8s04:9001/usr/root/xxx.csv现在hdfs上新建 /data文件夹hdfs dfs -mkdir /data然后上传本地文件到hdfshdfs dfs -put /home/guanlian_algo_confirm2/tb_order_user_sec_type_group.csv /datahadoop控制台http://192.168.1.122:50070/explorer.html#/dat
2021-12-29 17:57:17
2252
转载 论文溯源树AMiner
来自 DBLP、ArXiv、STM 等多家学术出版机构和平台的数据表明，在过去 20 年间，计算机科学、物理学、统计学等研究领域的出版物总量都有大幅增加。像 CVPR、AAAI 等有关人工智能等新兴领域的顶级会议，每年的论文接受量也已经高达上千篇。面对雨后春笋一样涌现的学术出版物和千上万篇学术论文，任何一名研究者都不可能了解所有新领域，即使这一领域和自己的研究方向近似。如果有一种工具，可以把一篇论文的源头梳理清楚，就能极大地减少无效检索的时间，快速了解一个新领域的发展脉络。在以往的研究中，计算机领域的相
2021-12-28 17:44:18
613
1
原创 机器学习bug
https://blog.csdn.net/weixin_43770077/article/details/110958529报错ValueError: y_true contains only one label (0). Please provide the true labels explicitly through
2021-12-24 15:49:59
607
转载 高斯回归过程应用例子
假设现在已经观察到了6个样本点，x为样本点特征（一维的），y为样本输出值。现在新来了一个样本点，要求是用高斯回归过程来预测新来样本点的输出值。这些样本点显示如下;其中前面6个点是已知输出值的训练样本，其值为：第7个点是需要预测的样本，红色的垂直条形线表示观察输出值的误差，绿色的垂直条形线为用高斯过程回归的误差。用GPR解该问题的流程大概如下（对应前面讲的一些基础知识）：选择适当的u（均值函数）和k（核函数），以及噪声变量σ，其中核函数的选择尤其重要，因为它体现了需处理问题的先验知识，应根据
2021-12-24 15:32:06
1426
转载 readme示例
https://blog.csdn.net/bcfdsagbfcisbg/article/details/78285804一、readme文件包含内容我们在项目中常常看到README.md 当然扩展名可能是txt ,rb,md ,甚至 me都有可能。README 应该是介绍code source 的一个概览，基本可以涵盖以下几部分内容：引用块内容你的项目介绍你的代码实现了什么功能?该如何使用? (系统环境参数,部署要素)代码组织架构是什么样的?版本更新重要摘要二、demoDEMO===
2021-12-16 11:14:09
1626
转载 反向词典_根据描述查找词语
最近，清华大学在 GitHub 开源了一项神器叫万词王（Want Wrong），不是你们想的那个万磁王图片，号称是首个支持中文及跨语言查询的开源在线反向词典。给大家普及一下，什么叫反向词典？普通的词典告诉你某个词语的定义，而反向词典恰好相反，可以告诉你哪些词语符合你输入描述的意思。上图为万词王在线反向词典的页面截图，其中演示了反向查词的一个示例，输入 “山非常高”，系统将返回一系列模型认为表达 “山非常高” 意思的词语，例如 “高峻”、“巍峨” 等。01 反向词典可以用来做什么?解决“舌尖现象”（
2021-12-14 14:57:08
13333
转载 论文阅读工具ReadPaper
对于搞科研的同学们来说，看论文是要经历的第一关，尤其是要读好多篇论文的时候，更是着实令人头大。这不，最近无意中发现了个在线论文阅读网站：readpaper.com，号称「论文阅读笔记神器，硕博科研学术必备之选」。5分钟带你上手ReadPaper！比方说，想看一篇有关轻量级CV网络「ShuffleNet」的相关论文。在首页输入「ShuffleNet」，点击搜索，一键直达。在ShuffleNet论文的详情页，点击「阅读」可以浏览论文原文，点击「引用」可以生成各种引用形式（写论文党狂喜）。点击「收
2021-12-02 08:58:50
4915
1
转载 pretty_errors_python
https://blog.csdn.net/weixin_36338224/article/details/104759600当我们写的一个脚本或程序发生各种不可预知的异常时，如果我们没有进行捕获处理的时候，通常都会致使程序崩溃退出，并且会在终端打印出一堆 密密麻麻 的 traceback 堆栈信息来告诉我们，是哪个地方出了问题。就像这样子，天呐，密集恐惧症要犯了都上面这段 traceback只有黑白两个颜色，无法像代码高亮那样，对肉眼实现太不友好了无法直接显示报错的代码，排查问题慢人一步，效率
2021-11-29 11:01:29
293
原创 时间序列小结
20211127自相关r均值方差协方差相关系数平稳序列均值和方差都是常数自相关：自己过去的行为,自己不同时刻取值的相关关系而不是两个不同的事件期望是一阶矩方差和协方差等是二阶矩宽平稳只要求部分统计特征为平稳不需要全部统计特征平稳延迟k阶r0就是方差时间序列均值的计算是每个点都是一个实测值然后求所有实测值的均值 因为每个时间点都是这个事件自己而传统统计每个变量的均值的估计是很多次所有取值的平均之后再取平均？20211128这里的k是指时间间隔而不是具体的某个点传统统
2021-11-28 10:34:13
394
转载 python符号求导
https://blog.csdn.net/m0_46149708/article/details/109024564from sympy import *x, y, z = symbols('x, y, z') # 定义变量x,y,zf = z**x + ln(x*y) + sin(x*y) + tan(x**z) # 定义目标函数print('目标函数：f=',f)print('------')# 对x求偏一介导dx = diff(f, x)print('对x求一阶偏导：dx=',
2021-10-29 16:17:48
716
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人