mysqldumpslow
上传用户:romrleung
上传日期:2022-05-23
资源大小:18897k
文件大小:6k
源码类别:

MySQL数据库

开发平台:

Visual C++

  1. #!/usr/bin/perl
  2. # mysqldumpslow - parse and summarize the MySQL slow query log
  3. # Original version by Tim Bunce, sometime in 2000.
  4. # Further changes by Tim Bunce, 8th March 2001.
  5. # Handling of strings with  and double '' by Monty 11 Aug 2001.
  6. use strict;
  7. use Getopt::Long;
  8. # t=time, l=lock time, r=rows
  9. # at, al, and ar are the corresponding averages
  10. my %opt = (
  11.     s => 'at',
  12.     h => '*',
  13. );
  14. GetOptions(%opt,
  15.     'verbose|v+',# verbose
  16.     'help+', # write usage info
  17.     'debug|d+', # debug
  18.     's=s', # what to sort by (t, at, l, al, r, ar etc)
  19.     'r!', # reverse the sort order (largest last instead of first)
  20.     't=i', # just show the top n queries
  21.     'a!', # don't abstract all numbers to N and strings to 'S'
  22.     'n=i', # abstract numbers with at least n digits within names
  23.     'g=s', # grep: only consider stmts that include this string
  24.     'h=s', # hostname of db server for *-slow.log filename (can be wildcard)
  25.     'i=s', # name of server instance (if using mysql.server startup script)
  26.     'l!', # don't subtract lock time from total time
  27. ) or usage("bad option");
  28. $opt{'help'} and usage();
  29. unless (@ARGV) {
  30.     my $defaults   = `my_print_defaults mysqld`;
  31.     my $basedir = ($defaults =~ m/--basedir=(.*)/)[0]
  32. or die "Can't determine basedir from 'my_print_defaults mysqld' output: $defaults";
  33.     warn "basedir=$basedirn" if $opt{v};
  34.     my $datadir = ($defaults =~ m/--datadir=(.*)/)[0];
  35.     if (!$datadir or $opt{i}) {
  36. # determine the datadir from the instances section of /etc/my.cnf, if any
  37. my $instances  = `my_print_defaults instances`;
  38. die "Can't determine datadir from 'my_print_defaults mysqld' output: $defaults"
  39.     unless $instances;
  40. my @instances = ($instances =~ m/^--(w+)-/mg);
  41. die "No -i 'instance_name' specified to select among known instances: @instances.n"
  42.     unless $opt{i};
  43. die "Instance '$opt{i}' is unknown (known instances: @instances)n"
  44.     unless grep { $_ eq $opt{i} } @instances;
  45. $datadir = ($instances =~ m/--$opt{i}-datadir=(.*)/)[0]
  46.     or die "Can't determine --$opt{i}-datadir from 'my_print_defaults instances' output: $instances";
  47. warn "datadir=$datadirn" if $opt{v};
  48.     }
  49.     @ARGV = <$datadir/$opt{h}-slow.log>;
  50.     die "Can't find '$datadir/$opt{h}-slow.log'n" unless @ARGV;
  51. }
  52. warn "nReading mysql slow query log from @ARGVn";
  53. my @pending;
  54. my %stmt;
  55. $/ = ";n#"; # read entire statements using paragraph mode
  56. while ( defined($_ = shift @pending) or defined($_ = <>) ) {
  57.     warn "[[$_]]n" if $opt{d}; # show raw paragraph being read
  58.     my @chunks = split /^/.*Version.*started with[00-377]*?Time.*Id.*Command.*Argument.*n/m;
  59.     if (@chunks > 1) {
  60. unshift @pending, map { length($_) ? $_ : () } @chunks;
  61. warn "<<".join(">>n<<",@chunks).">>" if $opt{d};
  62. next;
  63.     }
  64.     s/^#? Time: d{6}s+d+:d+:d+.*n//;
  65.     my ($user,$host) = s/^#? User@Host:s+(S+)s+@s+(S+).*n// ? ($1,$2) : ('','');
  66.     s/^# Query_time: (d+)  Lock_time: (d+)  Rows_sent: (d+).*n//;
  67.     my ($t, $l, $r) = ($1, $2, $3);
  68.     $t -= $l unless $opt{l};
  69.     # remove fluff that mysqld writes to log when it (re)starts:
  70.     s!^/.*Version.*started with:.*n!!mg;
  71.     s!^Tcp port: d+  Unix socket: S+n!!mg;
  72.     s!^Time.*Id.*Command.*Argument.*n!!mg;
  73.     s/^use w+;n//; # not consistently added
  74.     s/^SET timestamp=d+;n//;
  75.     s/^[  ]*n//mg; # delete blank lines
  76.     s/^[  ]*/  /mg; # normalize leading whitespace
  77.     s/s*;s*(#s*)?$//; # remove trailing semicolon(+newline-hash)
  78.     next if $opt{g} and !m/$opt{g}/io;
  79.     unless ($opt{a}) {
  80. s/bd+b/N/g;
  81. s/b0x[0-9A-Fa-f]+b/N/g;
  82.         s/''/'S'/g;
  83.         s/""/"S"/g;
  84.         s/(\')//g;
  85.         s/(\")//g;
  86.         s/'[^']+'/'S'/g;
  87.         s/"[^"]+"/"S"/g;
  88. # -n=8: turn log_20001231 into log_NNNNNNNN
  89. s/([a-z_]+)(d{$opt{n},})/$1.('N' x length($2))/ieg if $opt{n};
  90. # abbreviate massive "in (...)" statements and similar
  91. s!(([NS],){100,})!sprintf("$2,{repeated %d times}",length($1)/2)!eg;
  92.     }
  93.     my $s = $stmt{$_} ||= { users=>{}, hosts=>{} };
  94.     $s->{c} += 1;
  95.     $s->{t} += $t;
  96.     $s->{l} += $l;
  97.     $s->{r} += $r;
  98.     $s->{users}->{$user}++ if $user;
  99.     $s->{hosts}->{$host}++ if $host;
  100.     warn "{{$_}}nn" if $opt{d}; # show processed statement string
  101. }
  102. foreach (keys %stmt) {
  103.     my $v = $stmt{$_} || die;
  104.     my ($c, $t, $l, $r) = @{ $v }{qw(c t l r)};
  105.     $v->{at} = $t / $c;
  106.     $v->{al} = $l / $c;
  107.     $v->{ar} = $r / $c;
  108. }
  109. my @sorted = sort { $stmt{$b}->{$opt{s}} <=> $stmt{$a}->{$opt{s}} } keys %stmt;
  110. @sorted = @sorted[0 .. $opt{t}-1] if $opt{t};
  111. @sorted = reverse @sorted         if $opt{r};
  112. foreach (@sorted) {
  113.     my $v = $stmt{$_} || die;
  114.     my ($c, $t,$at, $l,$al, $r,$ar) = @{ $v }{qw(c t at l al r ar)};
  115.     my @users = keys %{$v->{users}};
  116.     my $user  = (@users==1) ? $users[0] : sprintf "%dusers",scalar @users;
  117.     my @hosts = keys %{$v->{hosts}};
  118.     my $host  = (@hosts==1) ? $hosts[0] : sprintf "%dhosts",scalar @hosts;
  119.     printf "Count: %d  Time=%.2fs (%ds)  Lock=%.2fs (%ds)  Rows=%.1f (%d), $user@$hostn%snn",
  120.     $c, $at,$t, $al,$l, $ar,$r, $_;
  121. }
  122. sub usage {
  123.     my $str= shift;
  124.     my $text= <<HERE;
  125. Usage: mysqldumpslow [ OPTS... ] [ LOGS... ]
  126. Parse and summarize the MySQL slow query log. Options are
  127.   --verbose    verbose
  128.   --debug      debug
  129.   --help       write this text to standard output
  130.   -v           verbose
  131.   -d           debug
  132.   -s ORDER     what to sort by (t, at, l, al, r, ar etc), 'at' is default
  133.   -r           reverse the sort order (largest last instead of first)
  134.   -t NUM       just show the top n queries
  135.   -a           don't abstract all numbers to N and strings to 'S'
  136.   -n NUM       abstract numbers with at least n digits within names
  137.   -g PATTERN   grep: only consider stmts that include this string
  138.   -h HOSTNAME  hostname of db server for *-slow.log filename (can be wildcard),
  139.                default is '*', i.e. match all
  140.   -i NAME      name of server instance (if using mysql.server startup script)
  141.   -l           don't subtract lock time from total time
  142. HERE
  143.     if ($str) {
  144.       print STDERR "ERROR: $strnn";
  145.       print STDERR $text;
  146.       exit 1;
  147.     } else {
  148.       print $text;
  149.       exit 0;
  150.     }
  151. }