7 aeolus_pu

尚未进行身份认证

暂无相关描述

等级
博文 278
排名 6k+

shell脚本在大文件日志中按照时间段快速搜索日志

问题描述:在大流量线上服务中,日志系统会产生数量庞大的日志,动辄就是几十G。在如此之大的文件中快速搜索日志是运维人员经常遇见的问题。我们经常遇见的问题是查询一段时间内的某些条日志。比如,今天有一个访问失败了,大约是在上午9点,把这条日志找出来,然后查找失败原因。常见处理方式及缺点:1.如果文件比较小,100m以内使用grep、awk或者sed进行逐条匹配比较方便,但是文件非常大时,其查找效率是非常...

2018-07-09 14:08:06

远程主机上的目录是否存在

有时候用scp复制文件到远程服务器时候会遇到远程的目录是否存在的问题bash1ssh$SERVER_IP"[-d$FOLDER]">/dev/null2>&1if[$?-ne0]then#脚本不正常退出exit1fi123456#>/dev/null2>&1将标准输出和错误输出定向到null,不输出1ba...

2018-07-06 15:45:45

Cannot execute statement: impossible to write to binary log since statement is in row format and BIN

https://jira.mariadb.org/browse/MDEV-6810

2018-06-21 12:37:19

MySQL hash分区表主从同步延迟

deletehash分区表删除数据,主从延迟1  hash分区不能删除2 在5.7.20版本以上表现较好3分区越多dml扫描分区表越多延迟越厉害bug参考https://bugs.mysql.com/bug.php?id=73648...

2018-05-29 15:27:56

MySQL5.7 GTID在线开启与关闭

当前场景 当前某些业务还有未开启GTID服务组,升级5.7后,如何检测是否符合开启GTID条件,如何在线修改切换使用GTID;已经升级5.7后,已经开启GTID,如何快速回滚后退;线上gtid如何维护等等,以上场景通过归纳下面内容解决gtid_mode参数新选项值onlinegtidenableonlinegtiddisablegtid_mode参数新选项my

2017-11-10 19:54:20

C++类的定义和对象的创建

类和对象是C++的重要特性,它们使得C++成为面向对象的编程语言,可以用来开发中大型项目,本节重点讲解类和对象的语法,如果你对它们的概念还不了解,请先阅读《C++类和对象的概念》。类是创建对象的模板,一个类可以创建多个对象,每个对象都是类类型的一个变量;创建对象的过程也叫类的实例化。每个对象都是类的一个具体实例(Instance),拥有类的成员变量和成员函数。有些教程将类的

2017-07-31 10:22:27

git请求报错 401

1.我们在服务器上直接gitclone项目的版本库的时候报401错误!错误如下:error:TherequestedURLreturnederror:401Unauthorizedwhileaccessing原因:git版本过低 2.git–version查看一下当前的git版本因为centosyum安装的git是1.7.1所以我们要升级gi

2017-05-11 14:12:40

centos5.8 python 2.4 升级到2.7

线上的python都是基于2.6写的,在python2.4版本上遇到这种问题exceptExceptionase查询发现是下面问题老版本的Python,except语句写作"exceptException,e",Python2.6后应写作"exceptExceptionase"。只好升级python版本到2.6之上,下面记录下升级到2.7过程因为yum依赖

2017-03-30 10:17:03

ansible requires the stdlib json or simplejson module, neither was found!

ansible执行远程命令或脚本需要python和python-simplejson的支持,如果python版本大于2.5则安装python即可,如果小于2.5则需要安装python和python-simplejson。安装python和python-simplejsonyuminstallpythonyuminstallpython-simplejson另外升级python

2017-03-30 09:40:38

c/c++中&& ||的区别

逻辑运算&&:逻辑与,前后条件同时满足表达式为真||:逻辑或,前后条件只要有一个满足表达式为真位运算 &:按位与|:按位或假如a=0xaa,b=0x55a&&b=true,在计算机中true以非0值表示,不同的编译器true值也不一样,一般为1a||b=true,a&b=0;值唯一a|b=0xff;值唯一“&&”跟“|”没有关系,在

2017-03-26 12:29:26

求有环单链表中的环长、环起点、链表长

1.判断单链表是否有环  使用两个slow,fast指针从头开始扫描链表。指针slow每次走1步,指针fast每次走2步。如果存在环,则指针slow、fast会相遇;如果不存在环,指针fast遇到NULL退出。  就是所谓的追击相遇问题:    2.求有环单链表的环长   在环上相遇后,记录第一次相遇点为Pos,之后指针slow继续每次走1步,fast每次走2步。在下次相遇

2017-03-25 11:15:45

python 多线程批量操作数据库测试

网上查询的资料,利用python进行多线程连接数据库,修改了部分#!/usr/bin/envpythonimportthread,threadingimportos,sys,time,getopt,MySQLdboptmap={               'user':'test_lvs',               'passwd':'tes

2017-03-22 16:53:03

mysql中headler_read计数器理解

mysqlheadler_read计数器,这些计数器对理解调优有一定的帮助 首先7个计数器,我们应该分为两部分:1)对索引读的计数器:前面的5个都是对索引读情况的计数器,    Handler_read_first:是指读索引的第一项(的次数);    Handler_read_key:是指读索引的某一项(的次数);    Handler_read_next:

2017-03-21 16:34:16

用GDB调试程序(二)

GDB的命令概貌———————启动gdb后,就你被带入gdb的调试环境中,就可以使用gdb的命令开始调试程序了,gdb的命令可以使用help命令来查看,如下所示:   /home/hchen>gdb   GNUgdb5.1.1   Copyright2002FreeSoftwareFoundation,Inc.   GDBisfreesoftw

2017-03-17 10:10:06

最近一周工作问题总结

1关于多线程slave_preserve_commit_order的设置对多线程复制影响  测试20391760 条数据insert slave库apply花费情况  开启slave_preserve_commit_order   花销 9分38秒关闭slave_preserve_commit_order 花销8分28秒   效果下降13%,官方提

2017-03-15 11:34:25

二叉树定义与存储

一 顺序结构存储 连续的一组存储地址单元存储二叉树中的结点。c语言定义#definemaxnode           /* 二叉树最大结点*/typedef elemtypesqBitree[maxnode]      /*0号单元存放根结点 */sqBiTreebt;bt二叉树定义为含有maxnode个elemtype类型

2017-03-13 11:33:57

线性表c语言实现----初始化插入删除

重温数据结构基础,记录之,好记性不如烂笔头#include#include#definemaxsize100typedefstructnode{ intdata[maxsize]; intlength;}SeqList;voidSeqListInit(SeqList*p,intn)   /*seqlistinit */

2017-03-07 14:38:19

mongodb 定时切割日志

小教本,记录之,mongodb定时切割日志#!/bin/shdatafile=/data/dblogfile=/data/logdays=30kill-SIGUSR1`cat$datafile/mongod.lock`find$logfile/-mtime+$days-delete另外需要使用crontab设定时间

2017-03-07 11:09:58

#define定义宏的用法

(一)、简单的,复习一下#definePI3.1415926#defineA(x)((x)*(x))这里的括号必不可少(二)、define的单行定义 ##=连接  #@=加单引号#x=加双引号 1,#defineConn(x,y)x##y //表示x连接y,举例说:intn=Conn(123,456);结果就是n=1234562,

2017-03-03 19:31:56

mysql中ut_d宏定义用法

源码摘抄  #ifdefUNIV_DEBUG/**Debugassertion.DoesnothingunlessUNIV_DEBUGisdefined.*/#defineut_ad(EXPR)   ut_a(EXPR)/**Debugstatement.DoesnothingunlessUNIV_DEBUGisdefined.*/

2017-03-03 17:55:21
奖章
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!