- 博客(371)
- 资源 (5)
- 收藏
- 关注
RSS订阅原创 【prometheus】监控MySQL并实现可视化
mysqld_exporter 是一个用于监控 MySQL 服务器的开源工具，它是由 Prometheus 社区维护的一个官方 Exporter。该工具通过连接到 MySQL 服务器并执行各种查询来收集关于 MySQL 服务器性能和状态的指标，并将这些指标暴露给 Prometheus 监控系统。总的来说，mysqld_exporter 是一个功能强大且易于使用的工具，可以帮助用户监控和诊断其 MySQL 服务器的性能和健康状态，从而及时发现和解决潜在的问题。导入模板后，选择import。
2024-04-25 08:54:30
809
48
原创 【prometheus】k8s集群部署AlertManager实现邮件和钉钉告警
Prometheus的报警功能主要是利用Alertmanager这个组件。当Alertmanager接收到 Prometheus 端发送过来的 Alerts 时，Alertmanager 会对 Alerts 进行去重复，分组，按标签内容发送不同报警组，包括：邮件，微信，webhook。使用prometheus进行告警分为两部分：Prometheus Server中的告警规则会Alertmanager发送。然后，Alertmanager管理这些告警，包括进行重复数据删除，分组和路由，以及告警的静默和抑制。
2024-04-22 08:45:36
3097
94
原创 【Linux】服务器时区 [ CST | UTC | GMT | RTC ]
硬件时间，也被称为实时时钟（RTC），是指计算机主板上的一个独立于操作系统的设备，它在电源关闭甚至断电情况下也能保持运行。其功能是记录当前的日期和时间。系统时间是计算机内部使用的时间，它通常在启动时从RTC设置，然后由系统时钟进行跟踪。系统时钟是操作系统内核的一部分，可以以毫秒或纳秒级别提供精确时间。本地时间是系统时间经过时区转换后的时间。时区是根据地理位置确定的，全球分为24个时区，每个时区大约代表15度的经度。例如，北京时间是UTC+8，而伦敦时间是UTC+0。时区是为了方便统一时间而划分的地理区域。
2024-04-17 14:57:08
4320
111
原创 【调度工具】Azkaban用户手册
Azkaban 是由 Linkedin 开源的一个批量工作流任务调度器。用于在一个工作流内以一个特定的顺序运行一组工作和流程。Azkaban 定义了一种 KV 文件格式来建立任务之间的依赖关系，并提供一个易于使用的 web 用户界面维护和跟踪你的工作流。
2024-04-03 09:21:31
1841
108
原创 【prometheus】k8s集群部署Grafana安装和配置|Prometheus监控K8S
Grafana是一款用Go语言开发的开源数据可视化工具，可以做数据监控和数据统计，带有告警功能。目前使用grafana的公司有很多，如paypal、ebay、intel等。
2024-04-01 08:53:17
2055
102
原创 【Linux】nmcli命令详解
以往我都是在linux的系统中都是通过配置文件来配置和修改ip的，今天我们就来说一说nmcli命令配置网络。目前所有的linux系统配置网卡等信息，均已经推行Network-Manager服务去管理。nmcli 是 NetworkManager 的命令行工具。nm 代表 NetworkManager，cli 代表 Command-Line 命令行
2024-03-25 08:47:10
4802
145
原创 【prometheus】k8s集群部署prometheus server
Prometheus是一个开源的系统监控和报警系统，现在已经加入到CNCF基金会，成为继k8s之后第二个在CNCF托管的项目，在kubernetes容器管理系统中，通常会搭配prometheus进行监控，同时也支持多种exporter采集数据，还支持pushgateway进行数据上报，Prometheus性能足够支撑上万台规模的集群。
2024-03-18 08:45:48
3379
153
原创 【Prometheus】k8s集群部署node-exporter
Exporter是Prometheus的指标数据收集组件。它负责从目标Jobs收集数据，并把收集到的数据转换为Prometheus支持的时序数据格式。 和传统的指标数据收集组件不同的是，他只负责收集，并不向Server端发送数据，而是等待Prometheus Server 主动抓取。
2024-03-11 08:44:34
2364
122
原创 【Linux】iftop命令详解
iftop命令是一种网络监测工具，它类似于Linux中的其他监测工具，如top、iotop等。但iftop是一个独立的命令，并不依赖于其他工具或服务。iftop命令可以帮助我们查看服务器上网络接口的实时流量情况，包括流入和流出的数据量、数据包数量、流量占用比例等信息。此外，iftop还具有过滤、排序功能，用于更好地监测特定网络流量。
2024-03-08 10:42:30
4305
112
原创 【云原生】kubeadm快速搭建K8s集群Kubernetes1.19.0
Kubernetes 是一个可移植、可扩展的开源平台，用于管理容器化的工作负载和服务，可促进声明式配置和自动化。 Kubernetes 拥有一个庞大且快速增长的生态，其服务、支持和工具的使用范围相当广泛。Kubernetes 这个名字源于希腊语，意为“舵手”或“飞行员”。k8s 这个缩写是因为 k 和 s 之间有八个字符的关系。 Google 在 2014 年开源了 Kubernetes 项目。 Kubernetes 建立在Google 大规模运行生产工作负载十几年经验的基础上， 结合了社区中最优秀的想
2024-03-04 11:55:03
4013
135
原创 【Prometheus】概念和工作原理介绍
Prometheus是一个开源的系统监控和报警系统，现在已经加入到CNCF基金会，成为继k8s之后第二个在CNCF托管的项目，在kubernetes容器管理系统中，通常会搭配prometheus进行监控，同时也支持多种exporter采集数据，还支持pushgateway进行数据上报，Prometheus性能足够支撑上万台规模的集群。
2024-02-26 10:03:25
1937
127
原创 【数据库】达梦数据库DM8开发版安装
DM8 采用了独特的双存储引擎架构，行存储引擎和列存储引擎可相互配合、协同工作。同时实现了计算层和存储层的分离，同一内核既支持共享存储式集群，也支持分布式事务集群。 相较于目前主流产品架构——不同特性依靠不同内核去实现，DM8 架构为业界首创，也是未来数据库架构的发展方向。
2024-02-22 14:15:02
1600
92
原创 【Linux】Kali Linux 系统安装详细教程（虚拟机）
Kali Linux是基于Debian的Linux发行版， 设计用于数字取证操作系统。每一季度更新一次。由Offensive Security Ltd维护和资助。最先由Offensive Security的Mati Aharoni和Devon Kearns通过重写BackTrack来完成，BackTrack是他们之前写的用于取证的Linux发行版 。
2024-02-13 22:49:53
3208
114
原创 【Linux】统信服务器操作系统V20 1060a-AMD64 Vmware安装
产品主要面向于我国党政军、企事业单位、教育机构，以及普通的企业型用户，着重解决客户在信息化基础建设过程中，服务端基础设施的安装部署、运行维护、应用支撑等需求。以其极高的可靠性、持久的可用性、优良的可维护性，在用户实际运营和使用过程中深受好评，是一款体现当代主流Linux服务器操作系统发展水平的商业化软件产品。添加磁盘挂载点，创建/boot ，剩下的其余分配给根目录 OOK，点击完成。开始安装，需要等待 15分钟左右了，可以活杯茶 小憩一下下。选择本地标准磁盘，存储配置选择自定义后点击完成。
2024-02-04 09:57:38
3597
110
原创 【Linux】VMware Workstation16安装银河麒麟高级服务器操作系统V10 SP3 AMD64
银河麒麟高级服务器操作系统V10是针对企业级关键业务，适应虚拟化、云计算、大数据、工业互联网时代对主机系统可靠性、安全性、性能、扩展性和实时性等需求，依据CMMI5级标准研制的提供内生本质安全、云原生支持、自主平台深入优化、 高性能、易管理的新一代自主服务器操作系统，同源支持飞 腾、鲲鹏、龙芯、申威、海光、兆芯等自主平台;应用于政府、金 融、教育、财税、公安、审计、交通、医疗、制造等领域。基于银河麒麟高级服务器操作系统，用户可轻松构建数据中心、高可用集群和负载均衡集群、虚拟化应用服务、分布式文件系统等
2024-02-01 14:05:55
3757
106
原创 【网络】WireShark过滤 | WireShark实现TCP三次握手和四次挥手
wireshark是非常流行的网络封包分析软件，功能十分强大。可以截取各种网络封包，显示网络封包的详细信息。常用来检测网络问题、攻击溯源、或者分析底层通信机制。
2024-01-29 13:42:43
3476
124
原创 【网络】传输层TCP协议 | 三次握手 | 四次挥手
TCP是面向字节流的。TCP不保证接收方应用程序所收到的数据块和发送方应用程序所发出的数据块具有对应大小的关系（例如，发送方应用程序交给发送方的TCP共10个数据块，但接收方的TCP可能只用了4个数据块就把收到的字节流交付上层的应用程序）。“第三次握手”是客户端向服务端发送数据，目的是告诉服务器，客户端有没有收到服务器“第二次握手”时传过去的数据，若发送的是“收到了”的信号，服务端接收后就正常建立TCP连接，否则建立TCP连接失败，服务器关闭连接端口，由此减少服务器开销及防止接收到失效请求而导致错误。
2024-01-23 13:00:21
3600
145
原创 【Linux】nc 网络诊断 | 文件传输 命令详解
nc是netcat的简写，是一个功能强大的网络工具。nc命令在linux系统中实际命令是ncat，nc是软连接到ncat，nc的主要命令如下。.实现任意TCP/UDP端口的侦听，nc可以作为server以TCP或UDP方式侦听指定端口端口的扫描，nc可以作为client发起TCP或UDP连接机器之间传输文件机器之间网络测速
2024-01-17 13:55:36
4634
150
原创 【Linux】网络诊断 traceroute命令详解
首先它发送一份TTL字段为1的IP数据包给目的主机，处理这个数据包的第一个路由器将TTL值减1，然后丢弃该数据报，并给源主机发送一个ICMP报文（“超时”信息，这个报文包含了路由器的IP地址，这样就得到了第一个路由器的地址），然后traceroute发送一个TTL为2的数据报来得到第二个路由器的IP地址，继续这个过程，直至这个数据报到达目的主机。，第1跳路由器收到后，查看目的地址进行转发，转发前会将TTL会减1，减完后TTL=0，就丢弃该数据包，并向客户端返回TTL超时的ICMP报文。
2024-01-15 13:14:41
4420
123
原创 【网络】网络层ICMP协议
IP协议本身并没有终端系统提供直接的方法来发现那些发往目的地址失败的IP数据包，且没有提供直接的方式来获取诊断信息。为了更有效地转发IP数据报和提高交付成功的机会，在网络层使用了网际控制报文协议ICMP，Internet控制报文协议(Intemet Control Message Protocol, ICMP）是IP协议的一种补充，它与IP协议结合使用，以便提供与IP协议层配置和IP数据包处理相关的诊断和控制信息
2024-01-11 13:23:27
4649
133
原创 【网络】网络层协议ARP和IP协议转发流程
IP地址是IP协议提供的一种统一的地址格式，它为互联网上的每一个网络和每一台主机分配一个逻辑地址，以此来屏蔽物理地址的差异。
2024-01-08 08:32:17
4115
135
原创 【网络】网络层IP地址和IP数据报的格式
IP地址（Internet Protocol Address）是指互联网协议地址，又译为网际协议地址。IP地址是IP协议提供的一种统一的地址格式，它为互联网上的每一个网络和每一台主机分配一个逻辑地址，以此来屏蔽物理地址的差异。
2024-01-04 13:36:18
6859
119
原创 【Linux】进程查看|fork函数|进程状态
进程（Process）是计算机中的程序关于某数据集合上的一次运行活动，是系统进行资源分配的基本单位，是操作系统结构的基础。在早期面向进程设计的计算机结构中，进程是程序的基本执行实体；在当代面向线程设计的计算机结构中，进程是线程的容器。程序是指令、数据及其组织形式的描述，进程是程序的实体(百度百科)。
2023-12-27 13:27:59
5738
137
原创 【powershell】Windows环境powershell 运维之历史文件压缩清理
PowerShell，从名字可以知道，他首先是一个shell，shell的意思就是和Linux的bash等一样、和原来的cmd一样就是在里边敲命令（可执行文件）使用；这里所谓自包含是指你要干一件事你可以逐步找到要做的事所需的所有命令，即便你记不得命令你也可以很容易找到，你找到命令看文档就很容易知道怎么使用。PowerShell使用了Linux Shell的思想，也就是所有的系统操作、配置，都可以在shell中敲写命令实现。获取文件夹下7天之前的天文件夹目录进行打包压缩，并删除7天之前的文件夹。
2023-12-21 14:25:04
7135
138
原创 【DataSophon】大数据服务组件之Flink升级
DataSophon也是个类似的管理平台，只不过与智子不同的是，智子的目的是锁死人类的基础科学阻碍人类技术爆炸，而DataSophon是致力于自动化监控、运维、管理大数据基础组件和节点的，帮助您快速构建起稳定，高效的大数据集群服务。为设计出轻量级，高性能，高可扩的，可满足国产化环境要求的大数据集群管理平台。（1）一次编译，处处运行，项目部署仅依赖java环境，无其他系统环境依赖。
2023-12-17 13:12:13
13565
129
原创 【DataSophon】大数据管理平台DataSophon-1.2.1基本使用
DataSophon也是个类似的管理平台，只不过与智子不同的是，智子的目的是锁死人类的基础科学阻碍人类技术爆炸，而DataSophon是致力于自动化监控、运维、管理大数据基础组件和节点的，帮助您快速构建起稳定，高效的大数据集群服务。
2023-12-16 13:31:55
2052
79
原创 【DataSophon】大数据管理平台DataSophon-1.2.1安装部署详细流程
DataSophon也是个类似的管理平台，只不过与智子不同的是，智子的目的是锁死人类的基础科学阻碍人类技术爆炸，而DataSophon是致力于自动化监控、运维、管理大数据基础组件和节点的，帮助您快速构建起稳定，高效的大数据集群服务。
2023-12-14 08:39:47
3882
100
原创 【Ambari】Python调用Rest API 获取YARN HA状态信息并发送钉钉告警
Ambari 借鉴了很多成熟分布式软件的 API 设计。Rest API 就是一个很好地体现。通过 Ambari 的 Rest API，可以在脚本中通过 curl 维护整个集群。并且，我们可以用 Rest API 实现一些无法在 Ambari GUI 上面做的操作。
2023-12-08 08:44:03
5193
119
原创 【Ambari】HDFS基于Ambari的常规运维
它负责安装软件、配置、启动和停止服务，以及管理在集群运行的服务。下面介绍服务相关的管理和运维操作，我们只对HDFS这一个组件的操作进行说明，YARN、HBase等组件操作基本类似，下面我们介绍两种常用的操作：服务重启和配置添加。在“HDFS”服务主页面上，将鼠标移至HDFS框的右上角“Action”，出现下拉菜单，您可以点击菜单栏中的选项启动、停止、删除该HDFS服务。对于HDFS、HBase、YARN等服务组件，我们上面只列举了重启和配置修改等操作，更多的复杂操作建议联系大数据工程师完成。
2023-11-25 11:21:38
2998
94
原创 【Linux】关系运算符、shell判断脚本执行时是否有传参、判断文件/文件夹是否存在、判断字符串是否相等、判断上个命令执行是否正常、判断字符串是否为空
字符串或者文件夹为空判断方式都有好多种，我们只需要掌握一种且能解决问题即可，也不用全部掌握。
2023-11-23 17:13:59
889
86
原创 【Linux】命令lsof使用详解
用于查看你进程开打的文件，打开文件的进程，进程打开的端口(TCP、UDP)。在linux环境下，任何事物都以文件的形式存在，通过文件不仅仅可以访问常规数据，还可以访问网络连接和硬件。因为应用程序打开文件的描述符列表提供了大量关于这个应用程序本身的信息，因此通过lsof工具能够查看这个列表对系统监测以及排错将是很有帮助的。lsof -c -p 123456 : 列出进程号为123456的进程所打开的文件。：文件描述符，应用程序通过文件描述符识别该文件。：文件类型，如DIR、REG等，常见的文件类型。
2023-11-20 10:30:52
3281
106
原创 【Linux】命令expect使用详解
expect 是由Don Libes基于Tcl（Tool Command Language ）语言开发的，是一种脚本语言，主要应用于自动化交互式操作的场景，借助Expect处理交互的命令，可以将交互过程如：ssh登录，ftp登录等写在一个脚本上，使之自动化完成。尤其适用于需要对多台服务器执行相同操作的环境中，可以大大提高系统管理人员的工作效率。
2023-11-16 14:07:56
4460
98
原创 【Hadoop】MapReduce详解
MapReduce思想在生活中处处可见。MapReduce 的思想核心是“分而治之”，适用于大规模数据处理场景。Map负责“分”，即把复杂的任务分解为若干个“简单的任务”来并行处理。可以进行拆分的前提是这些小任务可以并行计算，彼此间几乎没有依赖关系。Reduce负责“合”，即对map阶段的结果进行全局汇总。
2023-11-13 08:45:08
5363
112
原创 【Linux】Centos7 shell实现MySQL5.7 tar 一键安装
ssh 操作需要免密 附上 本机免密脚本 ssh_keygen.sh。执行完脚本 成功登录。
2023-11-11 16:55:34
2849
83
原创 【Hadoop】YARN容量调度器详解
Hadoop YARN的核心组件是ResourceManager，负责集群资源管理与调度，而ResourceManager组件的核心是调度器，负责统筹集群资源，满足应用的资源需求。调度器不仅需要优化整个集群的资源布局，避免热点等问题对应用的影响，最大程度利用集群资源；还要能协调好大量应用在集群的运行，基于多租户（队列）公平性、应用优先级等策略解决好资源竞争等问题；也要能满足个别应用在节点依赖、放置策略等方面的特殊需求。
2023-11-07 08:59:38
3588
102
原创 【Hadoop】Apache Hadoop YARN
YARN是一个纯粹的调度器，不负责应用程序的监控和状态追踪，不保证应用程序的失败或者硬件失败的情况对 TASK 重启，而是基于应用程序的资源需求执行其调度功能，使用了叫做资源 container 的概念，其中包括多种资源，比如，cpu，内存，磁盘，网络等。特定应用的执行由ApplicationMaster控制，ApplicationMaster负责将一个应用分割成多个任务，并和资源管理器协调执行所需的资源，资源一旦分配好，ApplicationMaster就和节点管理器一起安排、执行、监控独立的应用任务。
2023-11-05 12:47:18
2840
123
原创 【大数据基础平台】星环TDH社区集群版本部署
TDH企业级一站式大数据基础平台致力于帮助企业更全面、更便捷、更智能、更安全的加速数字化转型。通过数年时间的打磨创新，已帮助数千家行业客户利用大数据平台构建核心商业系统，加速商业创新。为了让大数据技术得到更广泛的使用与应用从而创造更高的价值，依托于TDH强大的技术底座，星环科技推出TDH社区版（Transwarp Data Hub Community Edition）版本，致力于为企业用户、高校师生、科研机构以及其他专业开发人员提供更轻量、更简单、更易用的数据分析开发环境，轻松应对各类人员数据分析需求。
2023-11-02 19:18:13
2480
84
原创 【大数据基础平台】星环TDH社区开发版单机部署
TDH企业级一站式大数据基础平台致力于帮助企业更全面、更便捷、更智能、更安全的加速数字化转型。通过数年时间的打磨创新，已帮助数千家行业客户利用大数据平台构建核心商业系统，加速商业创新。为了让大数据技术得到更广泛的使用与应用从而创造更高的价值，依托于TDH强大的技术底座，星环科技推出TDH社区版（Transwarp Data Hub Community Edition）版本，致力于为企业用户、高校师生、科研机构以及其他专业开发人员提供更轻量、更简单、更易用的数据分析开发环境，轻松应对各类人员数据分析需求。
2023-10-30 20:41:25
2429
100
Java最新大厂面试宝典
2023-10-11
程序猿面试简历模板精选
2023-10-10
dbeaver-ce-6.3.1-win32.win32.x86_64.zip
2020-02-14
SublimeText3_Build3083_x64_XiaZaiBa.zip
2019-08-15
eclipse-jee-2018-09-win32-x86-64.zip
2019-08-12
npp.6.9.2.Installer.zip
2019-08-12
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人