- 博客(343)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 常用工具合集
达摩院地址：https://www.modelscope.cn/docs。Umi-OCR，一款Windows平台下的开源文字识别工具。
2024-03-27 23:30:00
346
原创 ElasticSearch使用Grafana监控服务状态-Docker版
官网说明：https://github.com/prometheus-community/elasticsearch_exporter。: 指定 Prometheus 抓取数据的时间间隔，默认为 15 秒。访问地址：http://172.16.24.224:3000 可以进入Grafana页面，默认账号密码：admin/admin。访问Prometheus UI ：http://172.16.24.224:9090 可以看到是否监控成功。: 告警管理器配置，这里定义了一个静态的告警管理器的目标地址为。
2024-01-04 22:45:00
12877
原创 Superset服务安装
Apache Superset是一个开源的、现代的、轻量级BI分析工具，能够对接多种数据源、拥有丰富的图表展示形式、支持自定义仪表盘，且拥有友好的用户界面，十分易用。
2024-01-03 23:30:00
1000
原创 Docker安装Superset
可能报错,原因是本地的Python是2.x版本，执行该命令需要python3.x版本。解决方法进入容器创建用户名和密码，也可以将python2.x升级到3.x解决该问题。
2024-01-03 22:00:00
466
原创 通过docker快速实现OpenVPN搭建
如果公网访问VPN，公网的IP地址和端口要映射到当前容器所在服务器的1194端口。ip:port 设置的地址为你连接VPN访问的ip和端口，一般为公网IP和端口。作用是将默认网关重定向到 VPN 服务器上，所以要注释掉。通过docker快速实现OpenVPN搭建。导出客户端认证文件到本地。jast 为客户端用户。jast 为客户端名称。
2023-12-30 23:15:00
3266
1
原创 阿里云自建官方Docker仓库镜像提交拉取方法
本地我们镜像命名可能会不规范，发布时想重新命名进行发布到DockerHub我们可以使用。用于登录的用户名为阿里云账号全名，密码为开通服务时设置的密码。登录阿里云Docker Registry。实际拉取操作，可以看到我们拉取回来的镜像。您可以在访问凭证页面修改凭证密码。修改需要提交的配置文件。
2023-12-26 23:30:00
973
1
原创 LabelStudio数据标注详细方法
包括属性抽取、观点抽取、属性-观点抽取、属性-情感极性抽取、属性-情感极性-观点词三元组抽取等任务。其中属性-情感极-观点词(A-S-O)三元组抽取是最常见的任务之一，下面优先讲解该任务的标注规则。创建项目之前，需要先确定标注的任务类型以及需要标注哪些内容，然后点击创建（Create）开始创建一个新的项目，填写项目名称、描述。这里需要定位属性、情感极性、观点词三类信息，在标注时，需要将属性和情感极性进行组合，形成复合标签。设定好标签后，即可开始进行标注，选择正向或负向，最后点击提交，便标注好一条数据。
2023-12-15 19:00:00
567
1
原创 Debian系统安装OpenVPN
下载文件地址：https://github.com/OpenVPN/easy-rsa/releases/download/v3.1.2/EasyRSA-3.1.2.tgz。安装过程中需要下载github上的代码，如果网络不通则需要设置可以访问github的代理，也可以直接下载好将文件放到。openvpn客户端指定网段走本地流量：https://blog.eyyyye.com/article/63。Debian 搭建 OpenVPN 服务器：https://mrwu.red/web/4060.html。
2023-12-13 23:45:00
1156
原创 Proxmox创建Windows虚拟机
下载地址：https://www.xitongzhijia.net/将下载的ISO文件上传到Proxmox。在Proxmox选择虚拟机双机网络设备。上传后再ISO镜像中可以看到安装文件。选择手动设置IP，并填写IP地址。然后Ping下百度，发现网络正常。镜像选择需要安装的Win10。会提示下图没有可配置的网络。配置完成后可以看到网络信息。进入系统之后点击设置网络。选择ISO文件进行上传。填写名称，不能填写中文。设置网络，这里默认使用。再次进入网络，可以看到。
2023-12-13 23:15:00
232
原创 Proxmox创建CentOS虚拟机
如果是按照之前wifi连接网络，这里无法自动获取到IP，需要手动配置，如果直接获取到网络则跳过该步骤。手动填写网络信息，这里的网络信息是Proxmox的网络信息。下面介绍直接通过页面上传，也可将iso文件直接上传到。手动输入期望容量300GB，并点击更新设置，点击完成。这里选择Proxmox创建的网络名称就行，默认为。此时再打开网络，会显示已连接，此时网络就通了。输入服务器在Proxmox显示的名称，点击。设置主机名，即hostname，并点击应用。输入需要设置的root密码，点击完成。
2023-12-13 22:30:00
215
原创 Proxmox服务安装
如果使用LAN口插网线是可以访问的，但是我们没有插网线，直接使用的是wifi，此时这个地址是无法访问的，下面我们继续配置WIFI。网络配置：https://blog.csdn.net/qq_19905867/article/details/114118476。网络设置：https://blog.csdn.net/bugApe8/article/details/128234569。如果网络比较慢，也可以在本地下载好，下载地址下图有显示，直接将下载好的文件放在上面的那个目录中，页面刷新会自动加载。
2023-12-13 22:00:00
1612
原创 IoTDB控制台工具Workbench
Workbench是一个可创建多个连接的图形化数据库管理工具，用于管理IoTDB，提供元数据的可视化与管理、数据的增删改查以及权限控制等功能。Workbench不仅满足专业开发人员的所有需求，同时简洁友好的界面设计对初学者来说也易于上手。
2023-12-11 23:30:00
263
原创 IoTDB服务安装教程-单机版
数据在 IoTDB 中的组织形式是以时间序列为单位，每一个时间序列中有若干个数据-时间点对，每一个时间序列属于一个 database。Database 设定后，使用 CREATE TIMESERIES 语句可以创建新的时间序列，创建时间序列时需要定义数据的类型和编码方式。注意：目前，要使用单机模式，你需要保证所有的地址设置为 127.0.0.1，如果需要从非 IoTDB 所在的机器访问此IoTDB，请将配置项。在这里，我们首先介绍一下使用 Cli 工具创建时间序列、插入数据并查看数据的方法。
2023-12-11 23:00:00
322
原创 IoTDB服务安装教程-集群版
也就是，在要添加的节点上，下载IoTDB的安装包，解压，修改配置，然后启动。要保证第一个节点启动成功后，再启动其他节点。确切的说，要先保证第一个 ConfigNode 服务启动成功，即。如果启动失败，需要在所有节点执行清理环境后，然后从启动第一个节点开始，再重新执行一次。说明：删除 data 目录是必要的，删除 logs 目录是为了纯净日志，非必需。后指定的IP地址，可以是任意一个 DataNode 的IP地址。如果启动失败，需要清理环境（参考清理环境章节）后，再次启动。在任意节点上，在 Cli 执行。
2023-12-11 23:00:00
351
原创 Windows版本Docker安装详细步骤
此时就可以正常使用Docker了。重启之后会提示下图，点击。，成功后重启Docker。，电脑会直接自动重启~修改镜像配置，然后点击。登录Docker账号。
2023-08-28 23:15:00
1696
原创 IDEA中GIT相关操作
3.切换到主分支master上，如图所示，在remote branches上找到自己的分支，点击三角形图标在展开的列表中然后选择”Merge into Current“，弹出图3表示成功将自己分支的代码合并到主分支的本地仓库了，合并过程可能会出现主分支代码和自己分支代码冲突需要解决冲突。点击VCS -> Git -> Pull弹出如下弹窗，然后勾选主分支(master)点击pull拉取主分支代码。2.将本地改动的代码提交到本地仓库，然后push到自己远程上的分支。填写 Tag name ，Message。
2023-08-25 23:45:00
1141
原创 IDEA常用插件之类Jar包搜索Maven Search
它可以帮助用户快速查找和浏览Maven中央存储库中可用的依赖项和插件。它可以帮助用户更方便地管理项目依赖项。需要写入全类名，不支持模糊搜索。在最顶层菜单栏中点击。
2023-08-23 23:00:00
2617
原创 IDEA常用插件之私有注解Private Notes
目录下，如果在设置中设置了用户，注释内容会创建设置的用户，参考下个章节。设置在代码中显示的注释数量，如果注释字符数量大于设置的数量则会显示。默认插件快捷键可能与我们其他配置冲突。按我们刚刚设置的快捷键，添加注释。安装成功后如下图所示。默认注释数据会保存在。，注释数据则会保存到。
2023-08-23 22:00:00
299
原创 IDEA常用插件之代码扫描SonarLint
项目右键 -> Analyze -> Analyze with SonarLint。扫描完成结果在下面可以直接查看到报告。
2023-08-23 21:45:00
1166
原创 JMX+Prometheus监控Grafana展示
最近在阅读InLong的源码，发现它采用通过JMX+Prometheus进行指标监控。这里做了下延伸将介绍使用JMX+Prometheus+Grafana进行监控指标展示，这里单独将Metric部分代码抽离出来做介绍。
2023-07-10 23:15:00
788
原创 Hive窗口函数详细介绍
Hive 窗口函数是一种高级查询技术，用于对分组数据进行聚合计算，并且可以在数据分组内对每行数据进行排序和取值范围的过滤。与普通的聚合函数（如 SUM、MAX 等）不同的是，窗口函数可以同时获取每个数据行内的计算结果和数据群组/分区内部的排名、比例等信息，同时避免了使用 self-join 等操作来完成计算，使得运算效率更高。
2023-05-30 23:15:00
1891
原创 DataX下载安装使用
DataX 是一个异构数据源离线同步工具，致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能。
2023-05-13 17:15:00
867
1
原创 Linux Crontab 使用详解
crontab 是一个定时执行任务的工具，在 Linux 系统中广泛使用。它可以让用户在指定的时间自动执行某个指令或脚本，例如自动备份数据、清除日志、定时运行程序等。
2023-05-08 23:30:00
2573
原创 05.DolphinScheduler告警
用户需要创建告警实例，在创建告警实例时，需要选择告警策略，有三个选项，成功发、失败发，以及成功和失败都发。在执行完工作流或任务时，如果触发告警，调用告警实例发送方法会进行逻辑判断，将告警实例与任务状态进行匹配，匹配则执行该告警实例发送逻辑，不匹配则过滤。创建完告警实例后，需要同告警组进行关联，一个告警组可以使用多个告警实例。首先需要进入到安全中心，选择告警组管理，然后点击左侧的告警实例管理，然后创建一个告警实例，然后选择对应的告警插件，填写相关告警参数。如果没有发送成功可以在部署。
2023-04-26 23:45:00
575
1
原创 04.DolphinScheduler使用详细介绍
IN 是在当前运行脚本中生效OUT 是在DAG图的下一个脚本生效本样例展示了如何使用本地参数，打印输出当前日期。创建一个 Shell 任务，并编写脚本内容为echo ${dt}。点击配置栏中的自定义参数，配置如下图所示：dt：参数名IN：IN 表示局部参数仅能在当前节点使用，OUT 表示局部参数可以向下游传递DATE：数据类型，日期$[yyyy-MM-dd]：自定义格式的衍生内置参数保存工作流并运行，查看 Shell 任务输出日志。参数传递。
2023-04-26 23:30:00
2333
原创 03.DolphinScheduler资源中心
当获取到任务组资源的任务结束运行后，会释放任务组资源，释放后会检查当前任务组是否有任务等待，如果有则标记优先级最好的任务可以运行，并新建一个可以执行的event。您可在新建任务定义时，可配置对应的任务组，并配置任务在任务组内运行的优先级。【任务组名称】：任务组配置页面显示的任务组名称，这里只能看到该项目有权限的任务组（新建任务组时选择了该项目），或作用在全局的任务组（新建任务组时没有选择项目）【项目名称】：任务组作用的项目，该项为非必选项，如果不选择，则整个系统所有项目均可使用该任务组。
2023-04-26 23:15:00
6846
原创 02.DolphinScheduler数据源中心
注意：如果您希望在同一个会话中执行多个 HIVE SQL，您可以修改配置文件。这对运行 HIVE SQL 前设置环境变量的场景会很有帮助。，多条 SQL 将在不同的会话中运行。这里不一一介绍了，根据提示填写信息即可。可以测试数据源是否可以连接，点击。添加完成可以在数据源中心查看到。
2023-04-26 23:00:00
1391
1
原创 01.DolphinScheduler集群搭建
Apache DolphinScheduler 是一个分布式易扩展的可视化DAG工作流任务调度开源系统。适用于企业级场景，提供了一个可视化操作任务、工作流和全生命周期数据处理过程的解决方案。Apache DolphinScheduler 旨在解决复杂的大数据任务依赖关系，并为应用程序提供数据和各种 OPS 编排中的关系。解决数据研发ETL依赖错综复杂，无法监控任务健康状态的问题。
2023-04-26 22:45:00
580
CDH安装包下载,CDH、CM下载403，Cloudera收费无法下载解决
2021-06-17
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人