ZHANGHUI3239619的专栏

原创 linux 查看端口进程和常用命令

1.根据端口号查询进程netstat-tunlp|grep port根据进程pid查端口：netstat -nap | grep pid根据端口port查进程：netstat -nap | grep port可以使用一下命令查使用内存最多的10个进程 ps -aux | sort -k4nr | head -n 10可以使用一下命令查使用CPU最多的10个进...

原创 vmware下面linux磁盘扩容方法

一、Vm虚拟机下Linux扩展原有磁盘空间，详细步骤如下：二、查看系统分区查看使用情况发现根目录只有4.2G可以用了，下面我们就把这个目录进行扩展启动VMware环境下的Linux操作系统,添加新分区，需要root账号身份分区号选择默认，下同输入w保存。重启。发现多了一个/dev/sda3，下面就针对他来做文章了。这里我们基于LVM来...

原创 docker 安装minio

【代码】docker 安装minio。

原创 NLP民工的乐园: 几乎最全的中文NLP资源库

GitHub - fighting41love/funNLP: 中英文敏感词、语言检测、中外手机/电话归属地/运营商查询、名字推断性别、手机号抽取、身份证抽取、邮箱抽取、中日文人名库、中文缩写库、拆字词典、词汇情感值、停用词、反动词表、暴恐词表、繁简体转换、英文模拟中文发音、汪峰歌词生成器、职业名称词库、同义词库、反义词库、否定词库、汽车品牌词库、汽车零件词库、连续英文切割、各种中文词向量、公司名字大全、古诗词库、IT词库、财经词库、成语词库、地名词库、历史名人词库、诗词词库、医学词库、饮食词库、法律词库、

原创 动态更新sql

SELECT id,project_name, verify_time FROM "b_monitoring_date" where type ='0' ORDER BY project_name, verify_time descSELECT * FROM ( SELECT *, ROW_NUMBER() OVER(PARTITION BY project_name ORDER BY verify_time DESC) AS rn FROM b_monitoring_date whe

原创 VideoPipe可视化视频结构化框架

完成多路视频并行接入、解码、多级推理、结构化数据分析、上报、编码推流等过程，插件式/pipe式编程风格，功能上类似英伟达的deepstream和华为的mxvision，但底层核心不依赖复杂难懂的gstreamer框架（少部分地方需要），框架主干部分主要使用原生C++ STL实现，目标是平台高可移植性。框架可用于：视频结构化、以图搜图、目标行为分析等应用领域。

原创 emqx 配置ssl/tls 双向认证（亲自测试有效）

mqtt ssl 双向认证

原创 wvp-pro参数备忘

【代码】wvp-pro参数备忘。

原创 ZLMediaKit默认参数说明

你如果修改此范例配置文件(conf/config.ini)，并不会被MediaServer进程加载，因为MediaServer进程默认加载的是release/${操作系统类型}/${编译类型}/config.ini。该文件夹(release/${操作系统类型}/${编译类型})同时也是可执行程序生成目标路径，在执行MediaServer进程时，它会默认加载同目录下的config.ini文件作为配置文件，#过滤on_stream_changed hook的协议类型，可以选择只监听某些感兴趣的协议；

原创 CentOS下LVM分区简介

LVM 是逻辑盘卷管理器（ Logical Volume Manager ）的简称，是一种分区管理机制。LVM 是建立在硬盘 和分区 之上的一个逻辑层，为文件系统屏蔽下层磁盘分区布局，从而提高磁盘分区管理的灵活性。

原创 cesium示例封装参考

cesium示例封装参考：webgis

原创 postgres坐标系调整

先查看一下原始数据：

原创 postgres备份与还原

Postgresql数据库部署之：Postgresql 存在session 会话不能删除数据库。

原创 Centos7安装gdal踩坑记录

【代码】Centos7安装gdal踩坑记录。

原创 postgres 查询所有的序列

postgres 查询所有的序列

原创 postgres 多面、多线转换成单线或者单面

【代码】postgres 多面、多线转换成单线或者单面。

原创 java stream Map用法

.collect(Collectors.toMap(ProInsDutyRelation::getcId, a -> a, (k1, k2) -> k1));第一个参数ProInsDutyRelation::getcId表示选择ProInsDutyRelation的getcId作为map的key值；第二个参数a -> a表示选择将原来的对象作为map的value值；第三个参数(k1, k2) -> k1中，如果k1与k2的key值相同，选择k1作为那个key所对应的value值

原创 elastiscsearch index_reopened no_valid_shard_copy

POST /_cluster/reroute{ "commands": [ { "allocate_empty_primary": { "index": "xxxlog-2020-06-18", "shard": 1, "node": "elk-log-es-data-2", "accept_data_loss": true } } ]}...

原创 linux shell 定时删除前一天的日志

#!/bin/shfind /data/magic/log/default -mtime +1 -type f -iname "*.log*" | xargs rm -rf

原创 mysqladmin flush-hosts

1、使用mysqladmin flush-hosts 命令清理一下hosts文件如果不知道mysqladmin在哪个目录下，可以使用命令查找：which mysqladmin方法1）命令修改flush-hosts/usr/bin/mysqladmin flush-hosts -h 123.57.78.101 -P 3306 -uroot -p123456备注：其中服务器IP地址，端口号，用户名，密码，上面参数都可以根据需要来添加和修改；配置有master/slave主从数据库的要把主..

原创 JTS计算空间坐标梳理

1.计算道路与起点之间指定距离之间的交点坐标已知：道路、在道路的距离求解：到起点坐标距离的点 public static Coordinate lengthOnLineString2(Geometry roadLine, double length) { LocationIndexedLine locationIndexedLine = new LocationIndexedLine(roadLine); LinearLocation linearLocati

原创 聚合查询统计

SELECT areaid ,to_char((createtime),'yyyy-mm-dd') createtime ,AVG(idx:: NUMERIC) FROM "XX" where createtime>='2021-09-01 00:00:00' GROUP BY areaid,to_char((createtime),'yyyy-mm-dd') ORDER BY createtime desc

原创 centos将bmp格式的图片修改问题png图片格式

#!/bin/shall_n=("mle2_sel.bmp" "mlemod.bmp" "mlerf_sel.bmp")for i in ${all_n[@]}; do echo $i; cp $i ${i%.*}.png done

原创 centos端口开放

firewall-cmd --zone=public --add-port=8848/tcp --permanentfirewall-cmd --reloadfirewall-cmd --zone

原创 java多线程获取数据的几种方式

上面我们列举的几种获取多线程执行结果的方式，都是通过不同技术方法来实现的，而生产者消费者模式本身跟你运用的技术实现没有太多关系，接触过多线程开发的同学应该都有所了解；生产者消费者模式如下图所示生产者消费者模式是一种能够解耦与同步生产线程、消费线程、数据集合的多线程设计模式，一个或一组生产者线程负责向数据队列中生产数据，也就是线程执行结果；另外一个或一组消费者线程负责消费处理数据队列中的数据，生产者线程与消费者线程相互之间并没有直接的关联，数据的交互都是通过数据队列，通过这种模式能够很好的在一定程度上

原创 centos7 安装jdk配置环境变量以及防火墙端口放行配置

vi /etc/profileJAVA_HOME=/usr/local/java/jdk1.8.0_161JRE_HOME=/usr/local/java/jdk1.8.0_161/jreCLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar:$JRE_HOME/libPATH=$JAVA_HOME/bin:$PATHexport PATH JAVA_HOME CLASSPATH防火墙端口放行配置：a.开放端口号.

原创 Flink任务提交流程

原创 linux机器跳转到另外一台服务器命令

ssh -p 2222 user@host

原创 Arthas 线上诊断工具

https://arthas.aliyun.com/doc/dashboard.html

原创 kafka参数调优

socket.request.max.bytes=536870912zookeeper.connection.timeout.ms=18000message.max.bytes=536870912# 每个分区试图获取的消息字节数。要大于等于message.max.bytesreplica.fetch.max.bytes=536870912request.timeout.ms=900000

原创 linux 删除文件夹下面指定类型的文件

#. : 表示在当前目录下 find . -name "*.txt" -type f -print -exec rm -rf {} \; # find /root/2 -name "*.txt" -type f -print -exec rm -rf {} \;

原创 postgres数据备份

centos7下备份postgresql数据库为.bak文件由匿名 (未验证)提交于2019-12-03 00:39:02确保postgres配置了环境变量的情况下执行如下命令：备份数据库pg_dump -h 192.168.22.10 -U postgres international_db > /home/international_db.bak参数：postgres 连接用户名-h 数据库服务器地址我上面的命令中的 international_db ...

原创 es修复红色索引为绿色状态

GET _cluster/allocation/explain?prettyGET _cluster/health?level=shardsGET _cat/shards|grep UNASSIGNEDPOST /_cluster/reroute?retry_failed=truePOST /_cluster/reroute { "commands": [ { "allocate_empty_primary": { "index": "anal.

原创 logstash索引迁移报错的问题解决

首先logstash的目录有空格可能也会有错误Failed to execute action {:action=>LogStash::PipelineAction::Create/pipeline_id:main, :exception=>"LogStash::ConfigurationError", :message=>"Expected one of #, input, filter, output at line 1, column 1 (byte 1)", :backtra

原创 python常用的国内镜像源

豆瓣 https://pypi.doubanio.com/simple/网易 https://mirrors.163.com/pypi/simple/阿里云 https://mirrors.aliyun.com/pypi/simple/腾讯云 https://mirrors.cloud.tencent.com/pypi/simple清华大学 https://pypi.tuna.tsinghua.edu.cn/simple/

原创 docker 导出镜像

导入导出命令介绍涉及的命令有export、import、save、loadsave示例docker save -o nginx.tar nginx:latest或docker save > nginx.tar nginx:latest其中-o和>表示输出到文件，nginx.tar为目标文件，nginx:latest是源镜像名（name:tag）,后面也可以是容器idload示例docker load -i nginx.tar或docker load < n

原创 docker-修改容器挂载目录的3种方法小结

方式一：修改配置文件（需停止docker服务）1、停止docker服务systemctl stop docker.service（关键，修改之前必须停止docker服务）2、vim /var/lib/docker/containers/container-ID/config.v2.json修改配置文件中的目录位置，然后保存退出"MountPoints":{"/home":{"Source":"/docker","Destination":"/home","RW":true,"Name.

原创 MEC

MEC（Multi-access/Mobile Edge Computing，多接入移动边缘计算）是ETSI（European Telecommunications Standards Institute，欧洲电信标准化协会）提出的边缘计算用于移动通信网络的概念。在边缘计算（EC）前加上M，有两层意思：一个Multi-Access，表示多接入技术；另外一个是Mobile，代表移动制式。多接入技术有两层含义：从用户的角度看，用户可以通过不同接入网络统一接入5G的MEC，接受网络的统一管理控制；另一方面...

原创 大数据架构设计

原创 微服务架构