数据分析v-CSDN博客

转载第一批用AI做数据分析的人，已经碾压同事了！

随着GPT大热“AI大模型”无疑是最火爆的话题！Google、百度、腾讯等等巨头互联网公司，无不在布局人工智能技术和市场，甚至还有60k*16的高薪，挖掘会使用 AI 的数据人才！作为数据人，如何不被时代抛弃，享受AI技术带来的红利？！????知乎知学堂特发起：行业前沿资源——AI大模型公开课已为本号粉丝开通免费领取权限预计24小时后关闭通道！速进！AI大模型-重塑数据人核心竞争力（不限年龄！不限岗...

2024-04-10 08:03:35 15

转载干货：2024人工智能学习路线图（附链接）

如果觉得本文有帮助，请在推特和领英上关注我！我每周都会和朋友们分享有趣的链接，也可以及时订阅。想学习人工智能吗？却不知道如何或从哪里开始？早在2020年，我就在互联网上写下了前20大免费数据科学、ML和AI MOOCs（https://towardsdatascience.com/top-20-free-data-science-ml-and-ai-moocs-on-the-internet-40...

2024-04-08 16:19:37 129

转载数据异常如何检验？本文给出14种检验方法！

一、基于分布的方法1. 3sigma基于正态分布，3sigma准则认为超过3sigma的数据为异常点。图1: 3sigmadefthree_sigma(s): mu,std=np.mean(s),np.std(s)lower,upper=mu-3*std,mu+3*stdreturnlower,upper2. Z-scoreZ-score为标准分数，测量...

2024-03-26 07:51:47 35

转载取代数据岗，中国又一新兴岗位在崛起！这才是数据人未来5年最好的就业方向！...

作为席卷全球的新概念ESG已然成为当前各个行业关注的最热风口近期国内官方发布了一项ESG新证书含金量五颗星、中文ESG证书、完整ESG考试体系、名师主讲...甚至在数据行业圈成为大佬们的热门话题...01 ESG为什么重要？在双碳的大背景下，ESG已然成为了各个行业关注的发展重点战略板块。国际统一的国际可持续准则理事会ISSB，更是将亚太区总部设在北京，财政部高层出席揭牌仪式。如今无论是科技企业还...

2024-03-13 08:28:48 39

转载推荐：100个统计学资源网站！

简介原文：统计学 & R学习资源编辑：庄闪闪的R语言手册作者：CoffeeCat[1]转载于：Coffee学生物统计的地方[2]注：有些链接需要科学上网/较硬的英文阅读能力才能愉快地体验知识/技术带来的快感。1.个人主页、博客、社区、论坛北大李东风[3]中科大张伟平[4]谢益辉(人称谢大大)[5]：统计之都论坛[6]创始人(与之有关的统计之都[7])统计学资源链接大全[8]：知名统计系...

2024-03-08 16:31:12 45

转载干货总结：13 种概率分布的学习方法！

今天分享一份最常见的基本概率分布教程，大多数和使用 Python 库进行深度学习有关。01 概率分布概述共轭意味着它有共轭分布的关系。在贝叶斯概率论中，如果后验分布 p（θx）与先验概率分布 p（θ）在同一概率分布族中，则先验和后验称为共轭分布，先验称为似然函数的共轭先验。共轭先验维基百科在这里（https://en.wikipedia.org/wiki/Conjugate_prior）。多分类表...

2024-02-28 08:03:27 41

转载月薪已炒到15w？真心建议大家冲一冲数据分析新兴领域，工资高前景好

作为席卷全球的新概念ESG已然成为当前各个行业关注的最热风口近期国内官方发布了一项ESG新证书含金量五颗星、中文ESG证书、完整ESG考试体系、名师主讲...甚至在数据行业圈成为大佬们的热门话题...01 ESG为什么重要？在双碳的大背景下，ESG已然成为了各个行业关注的发展重点战略板块。国际统一的国际可持续准则理事会ISSB，更是将亚太区总部设在北京，财政部高层出席揭牌仪式。如今无论是科技企业还...

2024-01-30 16:27:07 88

转载前沿：2024，AI即将面临什么

作者：Melissa Heikkilä, Will Douglas Heaven本文约3300字，建议阅读12分钟本文追踪了AI在2024年度的四大热门趋势。《麻省理工科技评论》的“接下来是什么”一期环顾了行业，趋势和技术以求为您提供最新的未来视角。阅读我们该期的剩余内容（https://www.technologyreview.com/tag/whats-next-in-tech/）。去年...

2024-01-29 08:01:55 61

转载机器学习统计概率分布全面总结（Python）

在平时的科研中，我们经常使用统计概率的相关知识来帮助我们进行城市研究。因此，掌握一定的统计概率相关知识非常有必要。本文涉及的概念包括：随机变量(Random Variable)密度函数(Density Functions)伯努利分布(Bernoulli Distribution)二项式分布(Binomial Distribution)均匀分布(Uniform Distribution)泊松分布(P...

2024-01-15 08:28:04 78

转载安利一个免费的ETL神器

042024-01安利一个ETL神器然而悲伤的是世上没有后悔药，走了那么多弯路，掉了那么多头发才知道这个东西真的是好气啊！LEARN MORE图片由海艺AI绘制安利一个创业公司神器经常会有朋友问我为什么对市面上的各种软件都略知一二。其实这是一个略微悲伤的故事，因为作为一个经历了很多次从零到一搭建数据体系的数据分析师，我的数据工作经常是从软件选型开始做起的。最近在各种搜罗效率办公神器的时候，被朋友...

2024-01-04 07:18:22 135

转载处理不平衡数据的过采样技术对比总结

在不平衡数据上训练的分类算法往往导致预测质量差。模型严重偏向多数类，忽略了对许多用例至关重要的少数例子。这使得模型对于涉及罕见但高优先级事件的现实问题来说不切实际。过采样提供了一种在模型训练开始之前重新平衡类的方法。通过复制少数类数据点，过采样平衡了训练数据，防止算法忽略重要但数量少的类。虽然存在过拟合风险，但过采样可以抵消不平衡学习的负面影响，可以让机器学习模型获得解决关键用例的能力常见的过采样...

2024-01-03 08:20:16 85

转载数据清洗概念，方法及流程等等要点初探

数据清洗(Data Cleaning)是把数据记录中的错误数据辨认识别出来，然后将其去除，是对数据重新进行检查和校验的过程。数据清洗的目标是去除重复记录，消除异常数据，修正错误数据，确保数据一致性，并提高数据质量。数据仓库是关于特定主题的数据集合，数据来自不同类型的业务系统，并包含历史性数据，这样，在数据仓库中就会出现错误数据或者冲突数据的情况，将这类数据称为“脏数据”。根据确切的清洗规则和算法“...

2023-12-26 08:06:46 267

转载统计学习模型：概念、建模预测及评估

01.前言之前在硕士阶段，统计学习（SL）既不是我的研究方向，也不是我的研究工具，所以了解甚少。之前我与 SL 唯一的接触停留在非常走马观花的读过一遍 ISLR 那本书，积累的技能仅限于在 R 里调包来 fit 简单的 model。简单来说就是了解的东西连皮毛都算不上，更不用提个中细致的推导以及背后严谨的数学了。目前的学习和研究中，我导本身对统计学习要求很高，关键是她自己也很强，搞得我压力山大...

2023-12-19 08:23:16 68

转载月薪3万的职场人如何做数据分析？这10张图让你快速从入门到精通！

我们常说，不能度量，就无法增长。数据分析对于企业商业价值的提升有着至关重要的作用，在职场中，我们需要掌握一套系统的、科学的、符合商业规律的数据分析知识，来应对日常工作中的需求。马上就年底了，掌握一些数据分析知识，对年底的工作汇总也十分有用。01普通职场人为什么要学习数据分析？数据分析是通过收集、处理和分析数据，得出有价值的信息用于指导工作的过程。它有助于了解业务进展和变化，定位问题，指引工作方向，...

2023-12-12 07:55:21 89

转载干货：机器学习最全知识点汇总（万字长文）

本文共12000字，建议阅读20+分钟本文为你介绍机器学习的各类算法。1. 概览梯度下降法；牛顿法；拟牛顿法；坐标下降法；梯度下降法的改进型如AdaDelta，AdaGrad，Adam，NAG等。2. 梯度下降法的关键点梯度下降法沿着梯度的反方向进行搜索，利用了函数的一阶导数信息。梯度下降法的迭代公式为：根据函数的一阶泰勒展开，在负梯度方向，函数值是下降的。只要学习率设置的足够小，并且没有到达梯...

2023-12-06 07:57:10 164

转载数据科学家必须了解的六大聚类算法

在机器学习中，无监督学习一直是我们追求的方向，而其中的聚类算法更是发现隐藏数据结构与知识的有效手段。目前如谷歌新闻等很多应用都将聚类算法作为主要的实现手段，它们能利用大量的未标注数据构建强大的主题聚类。本文从最基础的 K 均值聚类到基于密度的强大方法介绍了 6 类主流方法，它们各有擅长领域与情景，且基本思想并不一定限于聚类方法。本文将从简单高效的 K 均值聚类开始，依次介绍均值漂移聚类、基于密度的...

2023-11-29 08:03:39 79

转载终于有人把怎么搭建数据指标体系给讲明白了！（附指标体系白皮书下载）

数字化转型过程中，很多企业面临着指标体系不完整的问题。比如：各部门根据业务需求，都有一部分量化指标，但不够全面，对企业整体数据分析应用能力提升的帮助有限缺乏整体考量而设置的指标体系，会产生错误的分析结果，进而影响企业经营层面的决策相比于单一指标的“出现什么问题，分析什么”，成体系化的指标“通常能够结合问题所在的背景，串联各个指标，并通过各种维度进行分析，从而使优化方案更加有针对性”。在数据分析中，...

2023-11-23 08:01:45 117

转载懂ESG的数据人，月薪都到15万了？

“今年2月初，投中网一篇《ESG岗位都炒到15W月薪了？》火爆网络ESG真的火了！“企业ESG部门经理月薪10-15万，应届生起薪2-4万，已经算个正常薪资水平。” ESG猎头如是说。01 求职新风口 ESG火爆网络要说这两年哪些词最热门且最受行业关注？ESG绝对能排在前三。作为行业新风口，ESG几乎席卷和覆盖了各大领域！这股风潮正在全行业悄然蔓延，大家暗戳戳“卷”起了关于ESG的一切。懂ESG...

2023-11-22 18:57:49 76

转载干货：36个顶级数据分析方法与模型

正文数据思维练习不仅要熟练地掌握了分析工具，还要掌握大量的数据分析方法和模型。这样得出的结论不仅具备条理性和逻辑性，而且还更具备结构化和体系化，并保证分析结果的有效性和准确性。今天从以下6个维度36种分析模型和方法逐个简略介绍，赶紧点赞收藏！战略与组织质量与生产营销服务财务管理人力资源互联网运营一、战略与组织1、SWOT分析主要应用于商业和管理领域，通过内部环境：机会与威胁，外部环境：优势与劣势两...

2023-11-17 08:04:35 145

转载干货：自动化探索性因素分析（EDA）来更快更好地理解数据

本文约3900字，建议阅读10分钟本文将会用常用的iris数据集来学习如何在R和Python中实现探索性因素分析的过程。图片来自Charlotte Karlsen,Unsplash什么是EDA？EDA是我们更好地理解数据集的重要方式之一。几乎所有的数据分析和数据科学专家都在产生新观点或者数据建模之前先做EDA。在现实生活中，依赖于数据集的复杂度和完整性，这个过程会花费大量时间。当然，变量越多...

2023-11-14 07:49:13 100

转载 12张思维导图带你掌握机器学习！（附下载）

本文约1500字，建议阅读5分钟本文为带领大家系统了解及掌握机器学习的主要知识内容。关注微信公众号“数据分析”，后台回复“20231030”，即可获取“12张思维导图”[ 导读 ] 本文通过12张思维导图，涵盖了包含机器学习算法、特征工程、机器学习实战项目、深度学习等知识，带领大家系统了解及掌握机器学习的主要知识内容！1. 思维导图总览本导图涵盖了机器学习的主要核心知识，具体包括：基本模型（回归...

2023-10-30 07:58:22 153