好好学习振兴中华-CSDN博客

导出指定表exp demo/demo@orcl file=d:\backup2.dmp tables=(teachers,students)exp 用户名/密码@远程的IP:端口/实例 file=存放的位置:\文件名称.dmp full=y。ignore: 忽略错误，如果表已经存在，则也是覆盖。file: 具体的备份文件地址。full: 是否导出全部文件。buffer: 缓存大小。demo：用户名、密码。

2024-04-05 10:16:17 208 1

原创 Oracle常规操作

when t.WAIT_CLASS='Idle' then '空闲类' else null end wait_name。when t.WAIT_CLASS='Commit' then '提交确认类'when t.WAIT_CLASS='Network' then '网络类'when t.WAIT_CLASS='Network' then '网络类'when t.WAIT_CLASS='Other' then '其他类'when t.WAIT_CLASS='Other' then '其他类'

2024-04-04 18:18:06 294

原创 postgresql并行查询（高级特性）

postgresql开启并行，用于性能优化

2023-09-03 19:26:43 1127

原创 Oracle之hint介绍

Oracle之hint介绍

2023-08-14 17:39:38 951

原创 Oracle根据日志执行相应的存过处理逻辑

Oracle根据日志执行相应的存过处理逻辑

2023-07-23 15:37:53 355

原创如何监控Linux和Oracle数据库运行状态

如何监控Linux和Oracle数据库运行状态

2023-07-22 21:18:56 475

原创 Oracle输出文本平面（CSV、XML）文本数据详细过程

使用Oracle存过的方式生成csv文件，使用SQL语句生成xml文件数据

2023-07-22 15:24:13 522

原创 Hadoop和hive一键启动脚本

Hadoop和hive一键启动脚本

2023-07-17 23:51:28 454

原创解决Hadoop集群hive库建表中文和表数据乱码问题

解决Hadoop集群hive库建表中文和表数据乱码问题

2023-07-17 23:32:23 459

原创 HDFS体系结构及基本概念

HDFS体系结构及基本概念

2023-07-16 18:45:10 309

原创分布式文件系统与HDFS的shell操作及查看元数据

分布式文件系统与HDFS的shell操作及查看元数据

2023-07-16 17:05:30 2169

原创【持续更新】Hadoop笔记

Hadoop笔记

2023-07-16 09:28:18 202

原创 Linux进程监控及控制【命令ps的使用】

Linux进程检测和控制，ps命令详解

2023-07-10 23:51:59 377

原创 Oracle批量生成供datax调用的json文件及可执行sh脚本

Oracle批量生成json文本和sh脚本

2023-07-10 23:27:07 623

原创【珍藏版】linux lsof命令详解

linux lsof命令详解，各种参数说明及常用的实例

2023-07-09 14:21:05 723

原创使用DataX同步数据（小白步骤，一看就懂）

datax同步以后数据。比如Oracle，SQL server，MySQL，Hadoop，pg，mdb

2023-07-02 12:55:04 314

原创 Oracle子查询改写的几种方式

Oracle的子查询改写及高性能函数的应用

2023-06-10 00:54:01 1346

原创 Oracle通过kettle工具用hash算法实现分表插入数据

Oracle通过kettle工具用hash算法实现分表插入数据1；建表2；kettle示例3；测试结果

2023-06-01 15:34:16 234

原创 Oracle之logmnr日志解析

Oracle之logmnr日志解析

2023-05-29 17:23:46 1333

原创 Oracle实现记录用户DDL行为操作的方法

Oracle实现记录用户行为DDL行为的具体方案

2023-05-29 16:59:48 666

原创 Oracle创建物化视图基本操作

Oracle创建物化视图的基本操作

2023-05-26 23:54:13 948

原创 Oracle环境使用kettle循环导出数据（生产测试）

kettle循环导出数据

2023-05-24 14:06:45 415

原创为什么程序员喜欢用Linux？

不仅这些，从行业来划分：通信、金融、互联网、教育、电子商务、机械制造、军工航天、电器业等等，都离不开Linux平台。4、运维监控zabbix详解(主要是zabbix、cacti、nagios等监控系统，现在用的比较多的是zabbix)1、Linux基础知识、基本命令(起源、组成、常用命令如cp、ls、file、mkdir等常见操作命令)4、linux高效文本、文件处理命令(vim、grep、sed、awk、find等命令)2、Linux企业常用服务(如dns、http、ftp、mail、nfs等)

2023-05-08 21:10:55 4804 2

原创 Oracle之可视化ETL任务调度设计接口实现方案

基于shell与Oracle自主开发的调度流程设计

2023-04-28 16:18:44 823

原创 Oracle之作业调度

项目上有时候，要定时轮询作业和相关的脚本，下面是执行job的两种方式：a.使用Oracle自身dbms_jobb.使用Linux的crontab功能，推荐使用此方式，因为比较稳定而且容易维护减少工作量。

2023-04-18 23:02:19 706

PostgreSQL 查询所有数据库大小

PostgreSQL 查询所有数据库大小，表大小，索引大小，以及表空间大小

2022-11-06

Linux下PostgreSQL安装部署详细步骤

Linux下PostgreSQL安装部署详细步骤，亲测，包含dbeaver 连接数据库 1，安装包下载 2，解析源码 3，配置环境变量 4，创建用户，授权，创建数据库

2022-11-06

Oracle2Oceanbase数据迁移示例，多表迁移

Oracle2Oceanbase数据迁移示例，多表迁移。源库：Oracle 目标库：oceanbase

2022-10-27

dbbridge单机和集群安装与配置

dbbridge单机和集群安装与配置 1，集群安装 2，单机安装 3，性能调优

2022-10-09

Linux服务器部署kettle环境；以及测试步骤

1、Linux环境安装jdk 2、上传kettle安装包 3、配置jdk环境变量 4、kettle之kjb、ktr，可执行shell脚本

2022-07-03

Linux服务器对Oracle、MySQL数据库性能，和精细化指标预警，邮件监控的功能实现

Linux服务器对Oracle、MySQL数据库性能，和精细化指标预警，邮件监控的功能实现。 1、shell脚本分别实现Oracle、MySQL情况下的邮件预警 2、分别对Oracle、MySQL的读取SQL文件做了调整 a.分别在Oracle、MySQL读取 .sql文件的形式，写邮件 b.分别在Oracle、MySQL情境中，执行SQL语句的形式，写邮件

2022-04-09

ETL之kettle实现异构库表的数据增删改功能

2022-04-02

调整参数后引起，ORA-00838: Specified value of MEMORY_TARGET is too small

调整参数后引起，ORA-00838: Specified value of MEMORY_TARGET is too small, needs to be at least 3 2768M 的解决方案

2022-03-30

Oracle删除亿级表数据的参考方法

1、使用存储过程的方法 2、使用游标的方法 3、进行对表数据的维护 4、执行表正确的CBO操作

2022-03-27

shell根据.sql文件，根据执行后的结果日志判断是否执行下一步

3、执行sql文件/service/script/update.sql（数据库假定为Oracle，连接信息任意），并判断 a) 如果执行成功，则执行另外一个文件/service/script/trigger.sql b) 如果执行失败，则将返回错误记录到/service/log/err_<当前日期时间，格式为2022031513456.log

2022-03-15

/service/file目录下，存在多级子目录，各级目录下存在多种文件，删除该目录以及子目录下所有文件目录，但保留所有一级子目

/service/file目录下，存在多级子目录，各级目录下存在多种文件，删除该目录以及子目录下所有文件目录，但保留所有一级子目录

2022-03-15

2022年日期维度（包含国家法定节假日和其他节假日）

2022-03-04

RHEL Linux 安装yum源详细步骤（包含源包链接）.txt

RHEL Linux 安装yum源详细步骤（包含源包链接），非常详细。

2020-07-04

RHEL Linux 离线安装MySQL8详细步骤（包含源包链接）.txt

RHEL Linux 7详细安装MySQL8.0.2的详细步骤，以及完整的安装包。非常详细。

2020-07-04

Linux下分库备份MySQL详细步骤（包含脚本）.txt

分库备份，可以有效的快速的备份数据。能够有效的保障某个库如果出现问题，快速的恢复。执行一个备份语句，备份一个库。如果数据里有多个库，就是执行多条相同的语句备份数据。注意文件名不应相同，以.sql文件结尾。

2020-07-04

mysql主从复制配置（完整已测试）.txt

(1)首先，mysql主库在事务提交时会把数据库变更作为事件Events记录在二进制文件binlog中；mysql主库上的sys_binlog控制binlog日志刷新到磁盘。 (2)主库推送二进制文件binlog中的事件到从库的中继日志relay log,之后从库根据中继日志重做数据库变更操作。通过逻辑复制，以此来达到数据一致。 Mysql通过3个线程来完成主从库

2019-09-26

Informatica优化（经验总结）

近来由于工作需要，使用informatica powercenter，对powercenter优化有几点浅微见解： 1、为平衡性能，在数据库可接受范围内尽量在数据库中进行数据排序，即在source qualifier里sql语句中进行排序； 2、抽取数据时只抽取需要字段，尽量减少输入输出端口，在其他组件也类似，一旦字段不需要输出，取消输出端口的选中状态； 3、数据要尽量早过滤，减少mapping过程中携带的数据量。。。。

2019-01-24

SQLserver数据库自动化备份

数据库备份脚本，自动删除就得备份和生成新的备份，已经亲自测试

2018-09-17

使用crontab检测Linux和Oracle运行是否正常

使用crontab检测Linux和Oracle运行是否正常 1、设计详细步骤。 2、生产和测试环境已经验证

2023-07-23

Linux服务器备份Oracle脚本及设置CRON详细步骤

Linux服务器备份Oracle脚本及设置CRON详细步骤。 1、包含shell脚本 2、包含crontab的详细设置 3、线上生产环境专用脚本

2023-07-22

hadoop之shell操作及查案元数据

hadoop之shell操作及查案元数据。 1、批量查询表结构 2、批量导出DDL

2023-07-16

Oracle+DataX+存储过程实现异构库之间的数据同步

Oracle+DataX+存储过程实现异构库之间的数据同步。 0、设计文档 1、Oracle批量生成json文件 2、Oracle批量生成shell脚本 3、Oracle存过执行shell脚本

2023-07-10

MySQL数据恢复的三种常用的方式

方法1、通过表备份的方式方法2、idb文件丢失（有备份的表的情况）方法3、使用MySQL的binlog的方式

2023-07-05

datax的异构数据同步

datax的异构数据同步，配置简单，效率很高，对Oracle，MySQL，SQL server ，Hadoop，pg完美支持。支持全量同步支持增量同步文档超详细，图文讲解

2023-07-02

kettle对数据分表插入

kettle对数据分表插入数据库Oracle etl工具 kettle 通过java脚本，hash算法，实现分表数据写入

2023-06-01

kettle动态解析XML文件数据导入Oracle或者其他数据库

kettle动态解析XML文件数据导入Oracle或者其他数据库需求背景：因为客户每天都要通过接口通过ftp上传固定格式的xml的文件，需要每天定时解析指定目录下的指定名称的xml文件导入Oracle和其他的数据库，所以开发了这个。生产环境的，没有问题呦

2023-05-26

Oracle使用命令行批量执行带参数及用户名是变量的SQL文件

Oracle使用命令行批量执行带参数及用户名是变量的SQL文件因为数据存在不同的Oracle数据库中，DDL是相同的，处理逻辑也是相同的，但是库名不一样。因为客户想要所有用户下的指标数据，如果挨个执行sql文件，工作量巨大，所以写了这个逻辑。使用Oracle命令行的方式，批量执行Oracle不同用户下的sql文件，where条件带变量的操作。

2023-05-25