Jak przechwytywać zapytania uruchamiane na serwerze MySQL?

Próbujemy przeprowadzić debugowanie wydajności serwera i chciałbym uchwycić migawkę zapytań uruchamianych na naszym serwerze MySQL w ciągu kilku minut.

Znam MySQL SHOW FULL PROCESSLIST, jednak chciałbym móc uruchomić to za pomocą wiersza poleceń, aby móc zrzucić go do pliku i przetworzyć.

Czy istnieje sposób na wyprowadzenie tego zapytania do pliku i uruchamianie go co sekundę?

Czy istnieje lepszy sposób na przechwycenie wszystkich uruchomionych zapytań?

Zauważ, że nie interesują mnie tylko powolne zapytania (znam powolny dziennik zapytań).

Chciałbym użyć dziennika powolnych zapytań. Przechwytuje wszystkie zapytania, nie tylko te, które są wolne, jeśli ustawisz long_query_time = 0.

Przechwytuje również WSZYSTKIE zapytania, co nie jest prawdą w przypadku wspomnianych tutaj technik podsłuchu TCP; nie przechwycą one zapytań wykonanych przez gniazdo. To samo dotyczy oglądania SHOW PROCESSLIST; przegapisz szybko działające zapytania.

Jeśli chcesz przechwytywać zapytania za pośrednictwem listy procesów lub ruchu TCP, sugerowałbym użycie Per -ona-Toolkit-pt-query-digest. Może sondować listę procesów dla Ciebie (i mieć sens z wyników, co jest bardzo trudne, jeśli sam przechwytujesz kilka próbek), a także może interpretować protokół TCP MySQL, abyś mógł pobrać trochę TCP ruch i analizuj go. Oczywiście jest to również najlepszy agregator zapytań / profiler / reporter, jaki kiedykolwiek napisano, ale nie powiedziałeś, co chcesz zrobić z zapytaniami po ich przechwyceniu.

Najsolidniejszym sposobem byłoby użycie „ogólnego dziennika zapytań”, który przechwytuje wszystkie zapytania: http://dev.mysql.com/doc/refman/5.1/en/query-log.html

Nie określasz wersji serwera MySQL, ale jeśli masz wersję 5.1.12 lub nowszą, możesz ją włączać i wyłączać za pomocą zmiennej globalnej za pomocą SQL; szczegóły w dokumentacji.

Wypróbuj to polecenie jako root (lub użyj sudo):

tcpdump -i eth0 -s 0 -l -w - dst port 3306 | strings | perl -e '
while(<>) { chomp; next if /^[^ ]+[ ]*$/;
  if(/^(SELECT|UPDATE|DELETE|INSERT|SET|COMMIT|ROLLBACK|CREATE|DROP|ALTER)/i) {
    if (defined $q) { print "$q\n"; }
    $q=$_;
  } else {
    $_ =~ s/^[ \t]+//; $q.=" $_";
  }
}'

Znaleziono http://www.mysqlperformanceblog.com/2008/11/07/poor-mans-query-logging/

Pewnie:

mysqladmin -u root -p -i 1 --verbose processlist > /tmp/pl.out

Twoje zdrowie

To może być miejsce dla serwera proxy MySQL . Zasadniczo umożliwia przechwytywanie (i manipulowanie) wysyłanych zapytań. Podstawowa konfiguracja przechwytywania jest dość łatwa. Następnie wystarczy zmienić konfigurację klienta, aby wskazywała na serwer proxy, aby można było przechwytywać wszystkie żądania.

Program tshark oparty na terminalach może pomóc:

tshark -T fields -R mysql.query -e mysql.query

sudo yum install wiresharkda tshark na Amazon Linux i sudo apt-get install tsharkda tshark na Ubuntu 14+

Użyłem rozwiązania „Rui Pedro Bernardino”. Działa świetnie, ale zmieniłem kilka rzeczy w pierwszej linii, jak wyszczególniono poniżej ...

tcpdump -i any -s 0 -l -vvv -w - dst port 3306 | strings | perl -e 'while(<>) { chomp; next if /^[^ ]+[ ]*$/;
    if(/^(SELECT|UPDATE|DELETE|INSERT|SET|COMMIT|ROLLBACK|CREATE|DROP|ALTER)/i) {
    if (defined $q) { print "$q\n"; }
    $q=$_;
  } else {
    $_ =~ s/^[ \t]+//; $q.=" $_";
  }
}'

Przechwytuj sesje mysql tcp za pomocą tcpdump, zarówno zapytań, jak i odpowiedzi. Możesz przeanalizować zrzut na przykład za pomocą narzędzi maatkit:

http://www.maatkit.org/doc/mk-tcp-model.html

http://www.maatkit.org/doc/mk-query-digest.html

Szukałem i szukałem, aż w końcu wylądowałem w MONyogu, aby monitorować wszystkie zapytania w czasie rzeczywistym, które są wykonywane na serwerze mysql. Jedyną rzeczą, na którą należy zwrócić uwagę, jest włączenie tabeli „Performance_schema” i „statement_digest” i Performance_schema to dostępne z MySQL 5.6.14 i nowszymi.