自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

叁木大数据

技术博客

  • 博客(274)
  • 资源 (6)
  • 收藏
  • 关注

原创 AIGC从入门到精通教程目录

ChatGPT与Discord无缝接入指南,获取你的专属聊天机器人(保姆级教程)《如何向ChatGPT提问并获得高质量的答案》—Prompt技术的完整指南。ChatGPT 接入飞书教程,创建自己的聊天机器人(保姆级教程)用ChatGPT快速阅读论文:3个步骤让你轻松阅读论文文档。零代码基础,一分钟教你快速搭建微信ChatGPT机器人!分享一个无需账号完全免费的 ChatGPT-4 的平台。差一个06.关于ChatGPT的66个副业赚钱技巧。70个ChatGPT爆款营销提示语!AI学的好,天天下班早!

2023-05-10 21:32:30 1025

原创 Flink攻略宝典(目录)

Flink教程目录做了很久的实时流开发,但是从来没有系统的去做一个技术总结,所以已此篇为起点将逐步写一些关于Flink相关的教程一、Flink介绍1.1 Flink简介二、Flink的运行架构2.1 Flink运行组件2.2 Flink任务提交2.3 Flink调度原理2.4 其他架构相关知识点三、算子篇四、Flink Window API五、Flink中的时间语义和Wate...

2020-05-13 22:12:23 628

原创 数据结构与算法教程目录

一、数据结构1.1 数据结构---------数组1.2 数据结构---------链表1.3 数据结构---------二叉树二、算法2.1 最通俗易懂的--------时间复杂度2.2 简单介绍--------空间复杂度2.3 稳定排序和不稳定排序2.4 数据结构内部排序和外部排序2.5 查找算法--------二分查找算法2.6 排序算法--------Shell排序(希...

2019-02-05 13:56:31 2218

原创 大数据之Hadoop目录

说在前面的话 适合有java基础、Linux基础、具有一定java开发经验的人!参考的资料 Hadoop官方参考资料:https://blog.csdn.net/qq_39657909/article/details/84581147 如果你想学习Hadoop并且官网看不懂,那么请务必先看看这份资料:h...

2018-12-06 09:21:27 3197

原创 pear admin 新增模块流程

3. 项目目录下运行 flask routes 查看所有路由情况,看路由是否生效。

2023-09-05 19:13:13 679

原创 pear admin 切换mysql&梳理

请求响应部分类似controller。执行逻辑部分service。仿照用户管理部分进行二开。前端请求部分 view。

2023-08-31 08:15:00 232

原创 pear admin 后端启动

【代码】pear admin 后端启动。

2023-08-29 19:30:55 875

原创 Flask delete&put

delete请求有点类似get请求put请求有点类似post请求。

2023-07-27 08:30:00 311

原创 Flask get &post请求

get请求GET把参数包含在URL中,访问时会在地址栏直接显示参数不安全,且参数大小比较小post请求参数通过传递,请求头的情况下需要不同的解析方式进行相关处理。

2023-07-25 08:15:00 1156

原创 sqllineage 源码阅读-------审核项目文档

SQLLineage的主要目标是通过解析SQL语句,自动追踪和展示数据的来源(源表)和去向(目标表)。这对于理解复杂的数据流和数据关系,尤其是在大数据环境中非常有用,可以帮助我们进行有效的数据治理。

2023-07-17 08:00:00 432

原创 AI绘图学习心得分享-Midjourney绘画AI,让你少走一些弯路

新手刚开始不会,又想要生成想要的图片效果,垫图技巧必不可少。

2023-05-23 13:30:00 645

原创 无界AI绘画基础教程,和Midjourney以及Stable Diffusion哪个更好用?

Midjourney,收费,上手容易,做出来高精度的图需要自己掌握好咒语。咒语写不好,像是抽奖。里面的模型基本都是大模型,小模型太少,需要一些辅助机器人或者辅助操作保持画风的一致。Stable Diffusion,本地部署,可免费使用,需要一定的部署能力和电脑配置支持。需要学习一些基本知识(比如里面的小模型,Lora等)才可以使用。无界AI,更容易上手,更像是傻瓜式的AI绘画,里面的小模型比较多,参数配置比较简单,界面操作也比较人性化。

2023-05-23 08:30:00 536

原创 AI绘画新秀-免费使用-Leonardo(Midjourney对手)注册教程

最近,Midjourney免费版暂时不能使用,但是我们发现了一款免费的AI绘画工具——Leonardo。这款软件无需使用魔法上网,国内用户直接可以使用,生成的图片质量也非常不错,可以作为Midjourney的替代品。Leonardo是一个AI绘画社区,同时也是一个AI绘画工具。

2023-05-22 13:00:00 1072

原创 midjourney的基础参数与指令

本教程收集于:AIGC从入门到精通教程midjourney的基础参数与指令目录1、各种参数的解释2、命令的使用方法

2023-05-22 08:30:00 128

原创 Midjourney基础教程

描述后面添加 --ar 这个参数可以修改图片尺寸比例,比如 --ar 3:4 --2:1 --ar 16:9 英文和数字之间需要加个空格。然后每次在描述后面添加 --quality 5 这个参数,渲染质量可以好一点,参数在 0.25-5之间,英文和数字之间需要加个空格。其实就是关键字(提示词),是你提供给Midjourney的文本,Midjourney依靠文本提示词来生成图片,Midjourney。Midjourney的使用方式是:通过给频道内的聊天机器人发送对应文本,聊天机器人返回对应的图片。

2023-05-19 13:30:00 586

原创 Midjourney 创建私人画图机器人,共享账号如何设置独立绘画服务器

3.在官方服务器作图,频道里面的人太多了,自己的指令刷一下就到上面了,翻来翻去太麻烦了,如何解决?返回Midjourney频道,找到announcements这个频道。1.Midjourney会员怎么自建绘图服务器,不受其他人的打扰?点击右上角,显示列表成员,然后找到Midjourney Bot。然后输入服务的名字,还能上传服务器头像,编辑号之后选择创建。选择要添加机器人的服务器,然后授权就成功了。添加成功之后还可以自定义频道,方便管理。添加后,点机器人,右键,个人资料。点击,然后选择添加至服务器。

2023-05-19 08:30:00 405

原创 Midjourney会员充值教程

在,输入订阅命令,打开订阅页面。/subscribe如果您的账号未加入服务器,可以点击邀请链接:Midjourney邀请NijiJourney邀请。

2023-05-18 13:30:00 1159 2

原创 AI绘画:Midjourney 注册

搜索到服务器之后打开,顶端会有个提示,让你加入Midjourney,有时候我们点击加入了,还会显示让你加入,只需要等一会就行,有可能是新号的问题,等个五分钟十分钟就能可以了,如果弹出那个调查的选择提,直接跳过就可以了。验证通过之后,我们登录,然后就会提示我们创建服务器或者加入,这无所谓的,可以选择创建,不创建就点击最下面的加入服务器,在点击去公告社区看一下就行。输入指令之后,然后发送即可,第一次发送会有这个提示,就是他条款什么的,我们先点一下这个链接,然后再点一下绿色的按钮就可以了,你的指令能生成图片了。

2023-05-18 07:30:00 460

原创 Midjourney 怎么制订专属AI头像

然后输入图片生成命令 /imagine prompt:粘贴图片链接 空格 描述(描述按照自己想要的风格写就行),可以尝试多几种风格,版本选择 v4。打开我们的Midjourney,点击左下角的+号,上传文件,上传自己的照片,按回车发送。前面有跟大家分享过定制AI头像变现的案例,今天就来教大家怎么生成自己的AI头像。然后就能生成属于自己的AI头像了,不是很像没关系,我们多尝试几次就行。发送照片之后,右键点击照片,复制链接。

2023-05-17 14:16:45 364

原创 品牌营销新利器:ChatGPT专属SOP,70+提问模板解决实际工作场景困惑

项目管理、项目协作计划、跨团队协作、任务分配、任务执行、任务最后期限、依赖关系、角色定义、职责明确、团队合作、协作平台、跟进进度、项目进度、里程碑、风险管理、问题解决、沟通协调、时间管理、成本管理、质量管理、数据分析、性能考核、效率提升、团队培训。

2023-05-17 13:45:00 319

原创 ChatGPT prompt指令大全

ChatGPT prompt指令大全更多Prompt自动使用,可以在chrome插件中搜索 WebChatGPT,没有账号的,可以拉到文章最下面。目录担任雅思写作考官写小说充当 Linux 终端充当英语翻译和改进者充当论文润色者(拿摘要部分举例)充当英翻中充当英英词典(附中文解释)充当前端智能思路助手担任面试官文字冒险游戏担任产品经理做表格充当英语发音帮手充当旅游指南充当中国亲妈充当“电影/书籍/任何东西”中的“角色”作为广告商充当花哨的标题生成器下五子棋充当讲故事的人担任足球解说员扮演脱口秀喜剧演员充当励

2023-05-17 08:45:00 10055

原创 ChatGPT如何生成可视化图表-示例中国近几年出生人口

因为ChatGPT的训练数据截止到21年9月,而Echarts库的大更新、强兼容版本 V5 的发布在此之前,也就是说, ChatGPT应该是可以生成兼容Echarts V5版本的图表配置的。具体情况下,你可能需要与ChatGPT API交互以获取所需的数据,然后根据需求进行更复杂的可视化操作。上述代码将生成一个简单的条形图,你可以根据需要修改代码以生成其他类型的图表。然后点击图表下方的操作按钮,就可以生成图表单页面网站文件、截图、分享在线图表链接给别人了~),就可以得到下图所示的图表了。

2023-05-16 13:45:00 550

原创 《如何向ChatGPT提问并获得高质量的答案》—Prompt技术的完整指南

欢迎阅读我的新作品《ChatGPT高质量答案之道:提示技术完全指南》!本书旨在为您提供全面的指南,以帮助您了解和掌握各种提示技术,从而从ChatGPT中获取高质量的答案。我们将深入研究如何运用不同的提示技术实现各种目标。ChatGPT是目前最先进的人工智能语言模型,能生成近似人类水平的文本。但要掌握如何正确地向ChatGPT提问以获取期望的高质量答案至关重要。本书的目标是帮助各类读者,无论您是普通用户、研究人员、开发者,还是想将ChatGPT作为个人助手,都能从中受益。

2023-05-16 13:32:04 2152

原创 只要学会这些AI工具,一个人就是一家营销咨询公司

随着AI工具的不断涌现,您只需掌握市面上热门的AI工具,便可独自开展营销咨询公司。通过一系列AI工具,您可以为企业提供全案服务,收获丰厚回报。例如,在协助一家美妆初创公司出海时,我们运用一系列AI工具完成了需求调研、营销策划、设计、直播/视频、网页设计等全方位服务,取得了不错的成果。

2023-05-16 08:45:00 589

原创 ChatGPT的基本变现思路

一个良好的商业模式就是产品+流量+转化,所以对于初级的赚钱思路卖账号而言,产品就是账号本身,流量就是天然的各个平台的免费流量。5.seo优化其实可以在第3步的时候进行,把你要优化的关键词让chatgpt融入到给你的回答里就好了。对于新事物的出现,很多人对此都是抱着一个看热闹的态度,大家对于这个东西的整体认知水平是很低的!3.再用chatgpt去一一回复这些问题,你就能够有100个这些人群关心的问题的内容了。4.再把这些内容每天定时发布到公众号,抖音,小红书,视频号,快手,甚至b站,都可以。

2023-05-15 13:45:00 245

原创 如何使用chatgpt生成精美PPT提高工作效率

我想做一份ChatGPT变现方法的PPT,请生成丰富的教学展示内容,因为生成PPT是需要MarkDown格式的,请您输出Markdown格式的内容。点击“Copy code”即可复制ChatGPT生成出的markdown源代码粘贴到Mindshow文本输入框,点击“导入创建”即可。左边导入菜单=》格式选择Markdown,“文本栏”里粘贴刚刚ChatGPT生成的Markdown源代码。点击右上角的“下载”按钮,您可以轻松下载“PDF格式”或“PPTX格式”的文件。接下来生成的PPT文档将完成制作!

2023-05-15 08:30:00 469

原创 ChatGPT 快速阅读论文:3 个步骤让你轻松阅读论文文档

介绍下这款工具是 ChatDOC,它是一款和文档聊天的应用工具。这款工具其实是基于一个已有文档的人工智能对话型智能程序。简单来说,我们可以上传文档,结合 ChatGPT 技术进行更有效的问题设计。再来聊聊一些小细节。通过免费注册上传文档后,我们就可以免费使用它了。目前一次最多支持 150 页的文档,同时文档采用的是加密存储技术,我们使用完就可以把它及时的删除掉。

2023-05-13 09:00:00 1688 1

原创 ChatGPT 由0到1接入 Siri

注意:部分老的系统可能会出现这个错误,没有问题的跳过这一步。原因是这是一个外部链接,您的手机可能会提示您打开“允许不受信任的快捷指令”。首先,我们需要从 OpenAI 平台获取 API 密钥。分享如何将 GPT 应用集成到苹果手机的 Siri 中。现在您已成功将 ChatGPT 集成到 Siri 中。请使用苹果自带的 Safari 浏览器打开链接。(当然手机是需要魔法(TZ)的)手机打开设置 → 快捷指令。

2023-05-12 10:18:02 1135

原创 Flask 路由和视图函数

在Flask中,路由是用于将URL映射到视图函数的机制。视图函数负责处理用户请求并生成响应。通过定义路由、编写视图函数并处理HTTP方法,可以构建出功能丰富的Web应用程序。

2023-04-05 23:15:15 736

原创 安装和配置 Flask

首先,需要安装Python 3和pip包管理器。虚拟环境可以帮助您隔离项目依赖,防止依赖版本冲突。,您应该能够看到"Hello, World!这将启用调试模式,并设置一个用于Flask会话的密钥。

2023-04-02 17:12:38 654

原创 RESTful API 概述

RESTful API 是一种基于 REST 架构风格设计的 Web API。而在讲其之前我们应该先去聊聊REST,。而RESTful API 通常基于 HTTP 协议进行通信,通过 URI(Uniform Resource Identifier,统一资源标识符)指定资源的位置,通过 HTTP 方法(GET、POST、PUT、DELETE 等)操作资源,通过 HTTP 状态码表示请求的处理结果。

2023-03-11 09:00:00 2961

原创 数据开发检验流程

数据开发检验流程一、了解你的数据1.1 数据总体情况了解1.2 数据总数情况1.3 数据行内容情况1.4 数据列内容情况二、判断你的输入输出数据2.1 总数判断2.2 行内容判断2.3 列内容判断(具体参见有效性)一、了解你的数据1.1 数据总体情况了解-- 在impala中使用SHOW TABLE STATS tbl;SHOW COLUMN STATS tblSHOW PARTITIONS tbl;1.2 数据总数情况-- 1.数据是否重复,找到数据主键SELECT COUNT(1),

2022-08-14 11:48:06 277

原创 维度建模之理论篇

事实表作为数据仓库维度建模的核心,紧紧围绕着业务过程来设计。其包含与该业务过程有关的维度引用(维度表外键)以及该业务过程的度量(通常是可累加的数字类型字段)。事务事实表用来记录各业务过程,它保存的是各业务过程的原子操作事件,即最细粒度的操作事件。粒度是指事实表中一行数据所表达的业务细节程度。事务型事实表可用于分析与各业务过程相关的各项统计指标,由于其保存了最细粒度的记录,可以提供最大限度的灵活性,可以支持无法预期的各种细节层次的统计需求。............

2022-08-03 23:18:22 298 1

原创 spark小文件处理

某个需求流程处理在上传s3阶段会使用spark 计算写入的数据,但是由于spark写入时是使用的默认分区200,虽然部分数据进行了分区数的处理,但是分区数效果不好。还是会存在几G或者更小十几M每个文件的情况,希望的是有一个通用的处理方式。使用spark 数据缓存,再通过去拿执行计划的缓存大小计算spark写入时所需的分区数!由于希望有一个通用的处理方式,所以直接采用侵入spark 代码的方式进行处理大致执行逻辑:2.3 性能影响评估选了一些数据,进行spark执行性能评估,执行逻辑忽略了,直接上结果。

2022-06-08 23:45:04 1010 1

原创 kafka消费者 confluent_kafka

python之kafka消费者——confluent-kafka一、版本二、需求概述一、版本kafka:2.5.0python:3.6.1confluent-kafka:1.5.0confluent-avro:1.5.0avro-python3:1.9.1二、需求概述前置条件:使用kafka connect 消费kafka 数据写入hive 表。前端会有一个写入状态表,告诉我们什么时候写完,但是遇到问题是,我们会拉取该状态表然后会立马启动一个处理程序去处理hive表的数据。...

2022-05-05 19:41:57 2772

原创 hive on spark 资源占用不释放

hive on spark 资源占用不释放一、环境描述二、描述2.2 问题2.3 现象三、解决3.1 过程3.2 解决一、环境描述CDH: 5.14.2Spark:1.6.0 (hive on spark没使用2.0+版本)Hue:3.9.0hive:1.1.0二、描述2.2 问题由于公司查询使用的hue,hue上有impala & hive 。在做大数据量测试和查询的时候impala 会出现内存不足的情况,所以测试人员&分析师偶尔还是会使用hive(底层是spark ) 去

2022-04-24 23:56:13 3376 2

原创 collect_set 如何有序

collect_set 如何有序一、问题描述二、探索流程&解决2.1 数据2.2 初始sql一、问题描述需求简述:有一张日度表,需要按照需求方要求去实现,其他逻辑暂时不讨论,其中会涉及一个月度聚合某字段,并去重复,且按照dt asc 排序环境:spark sql 2.4.0二、探索流程&解决2.1 数据 SELECT 3517977374903924421 AS product_id, '03年线下批发经验,严选品质,赠送运费险' AS recommen

2022-04-11 00:35:04 5286

原创 kafka生产者——java Api 分区发送

kafka生产者——java Api 分区发送一、简介二、生产者分区策略2.1 逻辑思考2.2 代码验证2.2.1 验证指定分区发送2.2.2 验证只指定key发送三、自定义分区器一、简介在生产者介绍阶段我们回顾了在数据发送时,可以有拦截器、序列化器、分区器三道处理。而这里就是介绍对应分区器的处理步骤。我们知道在kafka的每个topic中会分为多个partition,那为什么分多个partition呢?换个简单的理解如果我们把topic看做一张表,但是这张表由多个块组成,每个块则对应着每个partit

2022-03-31 19:47:00 2446

原创 kafka生产者——java Api 发送

kafka生产者——java Api使用一、环境简介二、同步发送API三、异步发送API3.1 普通异步发送3.1 带回调函数异步发送一、环境简介机器:13-inch, M1, 2020编码:IDEA环境:java1.8,kafka2.5kafka包:kafka-clients 2.5.0<dependencies> <!-- https://mvnrepository.com/artifact/org.apache.kafka/kafka-clients -->

2022-03-29 06:53:28 1688

原创 kafka生产者——python Api发送

kafka生产者——python Api使用一、环境简介一、环境简介机器:13-inch, M1, 2020编码:pycharm环境:python3.8.10kafka包:pykafka (pip install pykafka)如果你也是以上的环境那么该案例对你有一定的参考意义!以下内容为参考:博主文章实践的内容...

2022-03-26 19:33:47 3792

大数据阿里云开放端口.json

阿里云大数据开放端口

2020-11-23

DolphinScheduler.docx

大数据调度框架ds,定时任务调度,详解安装与基础配置。大数据调度框架ds,定时任务调度,详解安装与基础配置。大数据调度框架ds,定时任务调度,详解安装与基础配置。大数据调度框架ds,定时任务调度,详解安装与基础配置

2020-05-15

scala脑图.xmind

scala个人学习时总结的脑图

2020-03-09

实时ETL工具-StreamSets操作手册.docx

StreamSets操作手册

2020-02-18

HBase学习脑图

HBase简介、部署、优化、预分区等等知识点、最后进行总结

2019-04-10

个人总结JVM脑图

详解JVM组成,GC,内存区域,以及一些GC机制和算法,一些简单的调优

2019-04-10

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除