7 aeolus_pu

尚未进行身份认证

暂无相关简介

等级
TA的排名 7k+

shell脚本在大文件日志中按照时间段快速搜索日志

问题描述:在大流量线上服务中,日志系统会产生数量庞大的日志,动辄就是几十G。在如此之大的文件中快速搜索日志是运维人员经常遇见的问题。我们经常遇见的问题是查询一段时间内的某些条日志。比如,今天有一个访问失败了,大约是在上午9点,把这条日志找出来,然后查找失败原因。常见处理方式及缺点:1.如果文件比较小,100m以内使用grep、awk或者sed进行逐条匹配比较方便,但是文件非常大时,其查找效率是非常...

2018-07-09 14:08:06

远程主机上的目录是否存在

有时候用scp复制文件到远程服务器时候会遇到远程的目录是否存在的问题bash1ssh $SERVER_IP "[ -d $FOLDER ]" >/dev/null 2>&1if [ $? -ne 0 ]then #脚本不正常退出 exit 1fi123456# >/dev/null 2>&1将标准输出和错误输出定向到null,不输出1ba...

2018-07-06 15:45:45

Cannot execute statement: impossible to write to binary log since statement is in row format and BIN

https://jira.mariadb.org/browse/MDEV-6810

2018-06-21 12:37:19

MySQL hash分区表主从同步延迟

delete hash分区表删除数据,主从延迟1   hash 分区不能删除2  在5.7.20版本以上表现较好3 分区越多 dml扫描分区表越多 延迟越厉害bug参考https://bugs.mysql.com/bug.php?id=73648...

2018-05-29 15:27:56

MySQL5.7 GTID在线开启与关闭

当前场景 当前某些业务还有未开启GTID服务组,升级5.7后,如何检测是否符合开启GTID条件,如何在线修改切换使用GTID;已经升级5.7后,已经开启GTID,如何快速回滚后退;线上gtid如何维护等等,以上场景通过归纳下面内容解决gtid_mode参数新选项值onlinegtidenableonlinegtiddisablegtid_mode参数新选项my

2017-11-10 19:54:20

C++类的定义和对象的创建

类和对象是 C++ 的重要特性,它们使得 C++ 成为面向对象的编程语言,可以用来开发中大型项目,本节重点讲解类和对象的语法,如果你对它们的概念还不了解,请先阅读《C++类和对象的概念》。类是创建对象的模板,一个类可以创建多个对象,每个对象都是类类型的一个变量;创建对象的过程也叫类的实例化。每个对象都是类的一个具体实例(Instance),拥有类的成员变量和成员函数。有些教程将类的

2017-07-31 10:22:27

git请求报错 401

1.我们在服务器上直接git clone项目的版本库的时候报401错误!错误如下:error: The requested URL returned error: 401 Unauthorized while accessing原因:git 版本过低 2.git –version 查看一下当前的git版本因为centos yum 安装的git是 1.7.1所以我们要升级gi

2017-05-11 14:12:40

centos5.8 python 2.4 升级到2.7

线上的python都是基于2.6写的 ,在python 2.4版本上遇到这种问题 except Exception as e 查询发现是下面问题老版本的Python,except语句写作"except Exception, e",Python 2.6后应写作"except Exception as e"。只好升级python版本到2.6之上,下面记录下升级到2.7过程因为yum依赖

2017-03-30 10:17:03

ansible requires the stdlib json or simplejson module, neither was found!

ansible执行远程命令或脚本需要python和python-simplejson的支持,如果python版本大于2.5则安装python即可,如果小于2.5则需要安装python和python-simplejson。安装python和python-simplejsonyum install pythonyum install python-simplejson另外升级python

2017-03-30 09:40:38

c/c++中&& ||的区别

逻辑运算&&:逻辑与,前后条件同时满足表达式为真||:逻辑或,前后条件只要有一个满足表达式为真位运算 &:按位与|:按位或假如a = 0xaa ,b = 0x55a&&b = true ,在计算机中true以非0值表示,不同的编译器true值也不一样,一般为1a||b = true,a&b = 0; 值唯一a|b = 0xff; 值唯一“&&”跟“|”没有关系,在

2017-03-26 12:29:26

求有环单链表中的环长、环起点、链表长

1.判断单链表是否有环  使用两个slow, fast指针从头开始扫描链表。指针slow 每次走1步,指针fast每次走2步。如果存在环,则指针slow、fast会相遇;如果不存在环,指针fast遇到NULL退出。  就是所谓的追击相遇问题:    2.求有环单链表的环长   在环上相遇后,记录第一次相遇点为Pos,之后指针slow继续每次走1步,fast每次走2步。在下次相遇

2017-03-25 11:15:45

python 多线程批量操作数据库测试

网上查询的资料,利用python进行多线程连接数据库,修改了部分#!/usr/bin/envpythonimportthread,threadingimportos,sys,time,getopt,MySQLdboptmap={               'user':'test_lvs',               'passwd':'tes

2017-03-22 16:53:03

mysql中headler_read计数器理解

mysqlheadler_read计数器,这些计数器对理解调优有一定的帮助 首先7个计数器,我们应该分为两部分:1)对索引读的计数器:前面的5个都是对索引读情况的计数器,     Handler_read_first:是指读索引的第一项(的次数);     Handler_read_key:是指读索引的某一项(的次数);     Handler_read_next:

2017-03-21 16:34:16

用GDB调试程序(二)

GDB的命令概貌———————启动gdb后,就你被带入gdb的调试环境中,就可以使用gdb的命令开始调试程序了,gdb的命令可以使用help命令来查看,如下所示:    /home/hchen> gdb    GNU gdb 5.1.1    Copyright 2002 Free Software Foundation, Inc.    GDB is free softw

2017-03-17 10:10:06

最近一周工作问题总结

1 关于多线程slave_preserve_commit_order的设置对多线程复制影响  测试20391760 条数据insert  slave库apply花费情况  开启slave_preserve_commit_order    花销  9分38秒关闭 slave_preserve_commit_order 花销 8分28秒   效果下降 13%,官方提

2017-03-15 11:34:25

二叉树定义与存储

一  顺序结构存储 连续的一组存储地址单元存储二叉树中的结点。c语言定义#define maxnode            /*  二叉树最大结点 */typedef  elemtype sqBitree[maxnode]       /* 0号单元存放根结点  */sqBiTree bt; bt二叉树定义为含有maxnode个elemtype类型

2017-03-13 11:33:57

线性表c语言实现----初始化插入删除

重温数据结构基础,记录之,好记性不如烂笔头#include #include #define maxsize 100 typedef struct node{  int data[maxsize];  int length;}SeqList;void SeqListInit (SeqList *p,int n)    /* seqlist init  */

2017-03-07 14:38:19

mongodb 定时切割日志

小教本 ,记录之,mongodb 定时切割日志#!/bin/sh datafile=/data/dblogfile=/data/logdays=30kill -SIGUSR1 `cat $datafile/mongod.lock`find $logfile/ -mtime +$days -delete另外需要使用crontab 设定时间

2017-03-07 11:09:58

#define定义宏的用法

(一)、简单的,复习一下#define PI 3.1415926#define A(x) ((x)*(x)) 这里的括号必不可少(二)、define的单行定义 ##=连接   #@=加单引号 #x=加双引号 1,#define Conn(x,y) x##y  //表示x连接y,举例说:int n=Conn(123,456); 结果就是n=1234562,

2017-03-03 19:31:56

mysql中ut_d宏定义用法

源码摘抄    #ifdef UNIV_DEBUG/** Debug assertion. Does nothing unless UNIV_DEBUG is defined. */#define ut_ad(EXPR)    ut_a(EXPR)/** Debug statement. Does nothing unless UNIV_DEBUG is defined. */

2017-03-03 17:55:21

查看更多

勋章 我的勋章
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!