9 软件老王

尚未进行身份认证

我要认证

IT技术及人生分享,人人为我,我为人人,公众号「软件老王」

等级
TA的排名 1w+

阿里云产品之数据中台架构

1. 场景描述客户打包买了很多阿里云的产品,但是阿里云不负责实施,基于阿里云产品与客户需求,拟采用的数据中台架构,有类似需求的,可以参考下,拿走不谢!2. 解决方案阿里产品数据中台架构图:从下到上,简要介绍下各个阿里产品作用及承担的任务:2.1 云数据库 RDS阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。官方文档2.2 数据传输DTS数

2020-07-22 17:53:32

rabbitmq部署及配置与验证

1. 场景描述朋友项目需要弄个测试环境,稍微帮忙了下,系统不复杂,但是需要自己安装mysql、Reids、Es、RabbitMq等,Mq主要用在同步用户信息与发送站内消息和短信上,RabbitMq以前没记录,刚好又重新走了一遍,记录下部署、测试、常见问题,有需要的朋友,拿走不谢!2.解决方案2.1 mq部署安装说明,版本没有用最新的版本,用的2018年的3.6.15,最新的在github上下载太慢了。2.1.1 安装erlang语言相关包[root@ruanjianlaowang ~]# yum

2020-07-08 12:36:19

一次运维-堡垒机多次跳转导出及导入mysql数据库

1. 场景描述记录一次运维,朋友公司要从线上环境同步数据到测试环境,因为公司监管问题,导致数据无法从线上获取,需要通过vpn,堡垒机,3次跳转到目标主机,通过命令导出mysql数据文件,然后再将数据导入到测试环境,不复杂,稍微走了一点弯路,记录下,希望能帮到碰到同样问题的朋友,不谢!2.解决方案1. 连接目标服务器1. cccc-cluster vpn2. ssh root@192.168.1.11 / 密钥登陆3. ssh root@192.168.1.12 -p 29 4. sudo

2020-07-04 21:50:44

阿里云常用产品汇总及解释

1. 场景描述最近博客更新的少,跟朋友一起做些事情,最近主要给朋友做些售前工作,阿里云的产品线是真多,好多英文缩写,需要做沟通,系统汇总了一下,记录下,有需要的朋友拿走不谢。2. 解决方案从下面这个架构图开始吧:2.1 云数据库 RDS阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。(软件老王)2.2 ADB或ADS云原生数据仓库Analyt

2020-05-19 20:41:54

视频课程《小白快速入门Spring Cloud Alibaba》在csdn学院上线了

1.场景描述视频课程《小白快速入门Spring Cloud Alibaba》在csdn学院上线了,有需要的朋友可以直接点击链接观看。2. 课程内容课程地址:<https://edu.csdn.net/course/detail/28716>扫描二维码直接观看:3. 课程目录第一章 课程介绍软件老王首先介绍下本课程准备分享的内容,给准备学习SpringCloud Alib...

2020-04-23 21:25:03

ResponseBody与RequestBody[转]

1. ResponseBody@ResponseBody的作用其实是将java对象转为json格式的数据。@responseBody注解的作用是将controller的方法返回的对象通过适当的转换器转换为指定的格式之后,写入到response对象的body区,通常用来返回JSON数据或者是XML数据。注意:在使用此注解之后不会再走视图处理器,而是直接将数据写入到输入流中,他的效果等同于通过r...

2020-04-15 13:37:21

elasticsearch7.6.2实战(2)-es可视化及分析平台-kibana

1. 场景描述elasticsearch部署完成后,es官方提供了可视化、分析及管理平台-kibana,部署下,有需要朋友参考下,不谢!2. 解决方案2.1 下载(1)地址:https://www.elastic.co/cn/downloads/kibana(2)下载完成,200多兆2.2 解压及配置tar -zxvf kibana-7.6.2-linux-x86_64.tar....

2020-04-10 21:23:05

视频课程《小白快速入门springboot2.1.8》在csdn学院上线了

1.场景描述视频课程《小白快速入门springboot2.1.8》在csdn学院上线了,有需要的朋友可以直接点击链接观看。2. 课程内容课程地址:https://edu.csdn.net/course/detail/27802扫描二维码直接观看:3. 课程目录第一章 课程介绍软件老王首先介绍下本课程准备分享的内容,给准备学习springboot的朋友有个基本的概念,假如已经掌握或者...

2020-03-31 16:53:16

elasticsearch7.6.2实战(1)-单机快速部署

1. 场景描述elasticsearch只用过,没有部署或者维护过,从头完整走一遍,记录下,原创实战,有需要的朋友参考下。2 . 解决方案特别说下,以前win7下安装的3台虚拟机,没有联网,因为要安装elasticsearch-head需要安装前端报,调整为联网,安装yum、npm等,碰到了很多奇葩的问题,后续有时间发下。2.1 下载(1) 下载地址:https://www.elasti...

2020-03-30 11:27:48

greenplum数据库常用操作

1. 场景描述greenplum集群部署好后,软件老王在实际使用过程中碰到一些问题,简单记录下,希望能帮到有需要的朋友。2 .解决方案2.1 gpcc监控地址说明:非常重要,greenplum集群监控,可以监控数据库集群使用情况,包括cpu、内存、硬盘,执行情况等。http://192.168.85.158:28080 gpmongpmon2.2 典型创建表软件老王说明:...

2020-03-27 15:19:07

win7安装centos7虚拟机

1. 场景描述因测试中需要linux集群,目前的服务器不太方便部署,需要本机(windows7)启动多个linux虚拟机,记录下,希望能帮到需要的朋友。2. 解决方案2.1 软件准备(1)使用vmware-workstation进行虚拟化,版本用的:12.5.9,没有用最新版,一是12已经够用了,二是最新版破解难找(昨天家里用了14,好像也不是太难找),下载地址:https://www...

2019-11-05 09:43:33

kafka集群搭建及结合springboot使用

1.场景描述因kafka以前用的不多,只往topic中写入和读取过数据,这次刚好又要用到,记录下kafka集群搭建及结合springboot使用。2. 解决方案2.1 简单介绍(一)关于kafka,网上的介绍有很多,简单说就是消息中间件,大数据项目中经常使用,我们项目是用于接收日志流水数据。(二)关于消息中间件,主要有四个:(1)ActiveMQ:历史悠久,以前项目中使用多,现在更新慢...

2020-03-17 11:33:15

mysql主从库配置

1.场景描述废话不多说了,简单记录下mysql主从库配置,实现读写分离,还可以设置延迟同步,防止误操作,起到备库作用。。2.解决方案简单记录下如何快速对现有mysql库实现读写分离,至于可能遇到的数据不一致等问题,后续再解释,本次只介绍如何快速对现有mysql做主从库配置/读写分离。2.1 原理MySQL主从库或者读写分离配置,其实依靠的mysql自带二进制日志。简单说就是在主库上做的...

2020-03-10 14:46:10

文本相似性算法实现(二)-分组及分句热度统计

1. 场景描述软件老王在上一节介绍到相似性热度统计的4个需求(文本相似性热度统计(python版)),本次介绍分组及分组分句热度统计(需求1和需求2)。2. 解决方案分组热度统计首先根据某列进行分组,然后再对这些句进行热度统计,主要是分组处理,分句仅仅是按照标点符号做了下拆分,在代码说明中可以替换下就可以了。2.1 完整代码完整代码,有需要的朋友可以直接拿走,不想看代码介绍的,可以直接拿...

2020-03-03 13:34:13

一点区块链资料

1. 场景描述(1)今天找资料,无意中看到15年底-16年初弄的关于区块链的资料,当时写了个交流汇报区块链的ppt,感觉挺好的,共享下,希望能帮助朋友们理解区块链。(2)背景:15年底,老板从朋友那里听说区块链,据说外国很火,想趁着国内还不多,看看有啥机会没,比如申请个专利啥的,带着几个人兼职做了研究,弄了好几个月。(3)初步结论:目前区块链现状还是一地鸡毛,处于五代十国的阶段,不是我们能玩...

2020-02-28 15:51:50

视频课程《小白快速入门greenplum》在csdn学院上线了

1.场景描述视频课程《小白快速入门greenplum》在csdn学院上线了,有需要的朋友可以直接点击链接观看。2. 课程内容课程地址:https://edu.csdn.net/course/detail/27801?utm_source=xueyuanjuhe课程目录:目录第一章 课程介绍第二章 greenplum之背景介绍与下载第三章 greenplum之系统架构与技术架构说明...

2020-02-27 21:09:59

python中excel数据分组处理

1.场景描述因文本相似性热度统计(python版)需求中要根据故障类型进行分组统计,需要对excel进行分组后再分词统计,简单记录下,有需要的朋友可以直接拿走,不客气!2.解决方案采用pandas包首先进行分组,然后获取具体明细再进行分词处理(分词处理这里就不展开了),只介绍下python下excel分组,然后对具体明细进行处理。2.1 完整代码import pandas as pd...

2020-02-24 17:37:02

文本相似性热度统计算法实现(一)-整句热度统计

1. 场景描述软件老王在上一节介绍到相似性热度统计的4个需求(文本相似性热度统计(python版)),根据需求要从不同维度进行统计:(1)分组不分句热度统计(根据某列首先进行分组,然后再对描述类列进行相似性统计);(2)分组分句热度统计(根据某列首先进行分组,然后对描述类列按照标点符号进行拆分,然后再对这些句进行热度统计);(3)整句及分句热度统计;(对描述类列/按标点符号进行分句,进行热...

2020-02-21 14:13:17

文本相似性热度统计(python版)

0 写在前面节后第一篇,疫情还没结束,黎明前的黑暗,中国加油,武汉加油,看了很多报道,发现只有中国人才会帮助中国人,谁说中国人一盘散沙?也许是年龄大了,看到全国各地的医务人员源源不断的告别家人去支援湖北,看到医务人员、肺炎病人的故事,总会忍不住落泪,中国加油,中国人加油!1. 场景描述背景不写了,只谈技术,做的是文本相似性统计,因需要从文本描述性信息中分析同类信息,以便后续重点关注,数据量比...

2020-02-16 18:28:09

多机部署之session共享解决方案

1. 常见描述为了解决多机部署中的session共享问题( 场景: A服务器登录,请求负载打到B服务器会报未登录),拟采用nginx中的ip_hash,根据ip做负载,同一ip请求到同一服务器上,还有一个原因是因为页面用到多线程,也需要保持一个ip客户端请求到同一服务器端,但是因为是通过网关转发过来的,ip_hash获取到的客户端是网关的导致改方案失效。2. 解决方案2.1 测试接口真实测...

2019-12-25 16:15:09

查看更多

CSDN身份
  • 博客专家
勋章 我的勋章
  • GitHub
    GitHub
    绑定GitHub第三方账户获取
  • 签到新秀
    签到新秀
    累计签到获取,不积跬步,无以至千里,继续坚持!
  • 专栏达人
    专栏达人
    授予成功创建个人博客专栏的用户。专栏中添加五篇以上博文即可点亮!撰写博客专栏浓缩技术精华,专栏达人就是你!
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!
  • 勤写标兵Lv2
    勤写标兵Lv2
    授予每个自然周发布4篇到6篇原创IT博文的用户。本勋章将于次周周三上午根据用户上周的博文发布情况由系统自动颁发。
  • 学习力
    学习力
    《原力计划【第二季】》第一期主题勋章 ,第一期活动已经结束啦,小伙伴们可以去参加第二期打卡挑战活动获取更多勋章哦。
  • 分享王者
    分享王者
    成功上传51个资源即可获取