Библиотека знаний - mysql

Взаимная блокировка (deadlock)

Anonymous (anonymous@undisclosed.example.com) — 2012-11-07T11:05:06+00:00

Взаимная блокировка (deadlock)

Взаимная блокировка (англ. deadlock) — ситуация в многозадачной среде или СУБД, при которой несколько процессов находятся в состоянии бесконечного ожидания ресурсов, занятых самими этими процессами.

Простейший пример взаимной блокировки

Шаг	Процесс 1	Процесс 2
0	Хочет захватить A и B, начинает с A	Хочет захватить A и B, начинает с B
1	Захватывает ресурс A	Захватывает ресурс B
2	Ожидает освобождения ресурса B	Ожидает освобождения ресурса A
3	Взаимная блокировка

Восстановление пользователя debian-sys-maint

Anonymous (anonymous@undisclosed.example.com) — 2016-03-18T16:17:47+00:00

mysql, mysql.cnf

Восстановление пользователя debian-sys-maint

etc

/etc/mysql/debian.cnf

USE mysql;
INSERT INTO `user` (
  `Host`,
	`User`,
	`Password`,
	`Select_priv`,
	`Insert_priv`,
	`Update_priv`,
	`Delete_priv`,
	`Create_priv`,
	`Drop_priv`,
	`Reload_priv`,
	`Shutdown_priv`,
	`Process_priv`,
	`File_priv`,
	`Grant_priv`,
	`References_priv`,
	`Index_priv`,
	`Alter_priv`,
	`Show_db_priv`,
	`Super_priv`,
	`Create_tmp_table_priv`,
	`Lock_tables_priv`,
	`Execute_priv`,
	`Repl_slave_priv`,
	`Repl_client_priv`,
	`Create_view_priv`,
	`Show_view_priv`,
	`Create_routine_priv`,
	`Alter_routine_priv`,
	`Create_user_priv`,
	`ssl_type`,
	`ssl_cipher`,
	`x509_issuer`,
	`x509_subject`,
	`max_questions`,
	`max_updates`,
	`max_connections`,
	`max_user_connections`,
  `authentication_string` -- MariaDB
)
VALUES (
	'localhost',
	'debian-sys-maint',
	password('PASSWORD-HERE'),
	'Y',
	'Y',
	'Y',
	'Y',
	'Y',
	'Y',
	'Y',
	'Y',
	'Y',
	'Y',
	'Y',
	'Y',
	'Y',
	'Y',
	'Y',
	'Y',
	'Y',
	'Y',
	'Y',
	'Y',
	'Y',
	'N',
	'N',
	'N',
	'N',
	'N',
	'',
	'',
	'',
	'',
	0,
	0,
	0,
	0,
  ''
);

UPDATE `user` SET `password`=PASSWORD('PASSWORD-HERE') WHERE `user`='debian-sys-maint';
FLUSH PRIVILEGES;

mysql -uroot -p mysql < restore-debian.sql

Сравнение баз данных

Anonymous (anonymous@undisclosed.example.com) — 2016-10-22T15:46:55+00:00

mysql, sql, diff

Сравнение баз данных

Сравнение дампов sql

Установка

$ apt-get install colordiff

Сравнение

$ mysqldump --skip-comments --skip-extended-insert -u root -p dbName1>file1.sql
$ mysqldump --skip-comments --skip-extended-insert -u root -p dbName2>file2.sql
$ diff file1.sql file2.sql

Dump / Restore

Anonymous (anonymous@undisclosed.example.com) — 2019-05-08T18:01:56+00:00

mysql, sql, utils

Dump / Restore

Dump

$ mysqldump -u[uname] -p[pass] > mysql.sql
$ mysqldump -u[uname] -p[pass] [dbname] | gzip -9 > backupfile.sql.gz
$ mysqldump --hex-blob -A > all_databases.sql
$ mysqldump --all-databases -u[uname] -p[pass] > dump.sql
$ mysqldump --host=localhost --user=root --password=password --opt --skip-dump-date --skip-extended-insert --database database_name > /tmp/mydatabase.sql
$ mysqldump --all-databases -u[uname] -p[pass] --default-character-set=cp1251 > dump.sql
$ mysqldump --routines --add-drop-table --disable-keys --extended-insert --events -v --host=127.0.0.1 --port=3306 -p -u root skringo > dump.sql

–routines
–add-drop-table
–disable-keys
–extended-insert
–events
-v
–host=127.0.0.1
–port=3306
-p
-u
–column-statistics=0 - отключентие статистики при дампе и исправление ошибки с (mysqldump: Couldn't execute 'SELECT COLUMN_NAME, JSON_EXTRACT(HISTOGRAM, '$."number-of-buckets-specified"') Unknown table 'COLUMN_STATISTICS' in information_schema (1109))

Ключи

–default-character-set=cp1251 - Указание кодировки при експорте

С упаковкой

$ mysqldump --user=root --password=password database_name | gzip > dump.sql.gz

Restore

$ mysql -u[uname] -p[pass] database_name < file_name.sql
$ gunzip -c /path/backup.Sql.Gz | mysql -h -u[uname] -p[pass]
$ gunzip < [backupfile.sql.gz] | mysql -u [uname] -p[pass] [dbname]
$ /usr/bin/gunzip < database.gz database.sql
$ mysql -u[uname] -p[pass] database_name < database.sql
$ mysql -u[user] -p database_name < database.sql
$ mysql>source /path/to/database.sql
$ mysql -u[user] -p --default-character-set=cp1251 database_name < database.sql

Ключи

–default-character-set=cp1251 - Указание кодировки при импорте

С распаковкой

$ zcat ./dump.sql.gz | mysql -u 'root' -p database_name
$ gunzip < ./dump.sql.gz | mysql -u root -p database_name
$ gunzip -c ./dump.sql.gz | mysql -u root -p database_name
$ gunzip ./dump.sql.gz

Из оболочки MySql

$ mysql> create database database_name;
$ mysql> \! ( zcat  database_name.sql.gz > database_name.sql & )
$ mysql> source database_name.sql

Утилиты

Система резервного копирования и восстановления данных для MySql - Архивирование БД (Ориентировался на Debian архитектуру)

Ошибки MySql/MariaDB

Anonymous (anonymous@undisclosed.example.com) — 2017-12-03T09:19:27+00:00

mysql, mariadb, percona, errors

Ошибки MySql/MariaDB

Deadlock found when trying to get lock

SQLSTATE[40001]: Serialization failure: 1213 Deadlock found when trying to get lock; try restarting transaction
The SQL being executed was: UPDATE tbl_point
SET location = POINTFROMTEXT(CONCAT('POINT(55.683452 37.526923)'))

Для выяснения причины ошибки, необходимо запустить SHOW ENGINE INNODB STATUS;

No such file or directory

SQLSTATE[HY000] [2002] No such file or directory

Ошибка появляется при неверном указании сокета для драйвера PDO pdo_mysql.default_socket

Got error 28 from storage engin

Got error 28 from storage engine

Got error 28 from storage engine - Закончилось место на диске
MySQL Error: Out of resources when opening file './db_name/table_name.MYD' (Errcode: 24)

Checking for corrupt, not cleanly closed and upgrade needing tables

Checking for corrupt, not cleanly closed and upgrade needing tables

mysqlcheck –check-upgrade –all-databases –auto-repair -u root -p
mysql_upgrade –force -u root -p

Too many open files

Can't read dir of '.' (Errcode: 24 "Too many open files")

Превышение одновременно открытых дескрипторов

Анализ состояния

Сколько разрешено открывать файловых дескрипторов пользователю mysql (системные ограничения)

# cat /etc/security/limits.conf | grep -vP '^#'

Сколько разрешено открывать файловых дескрипторов (конфигурация)

cat /etc/mysql/my.cnf|grep open_files_limit

Сколько занято дескрипторов
```
lsof -u mysql | wc -l
```
Cколько дескрипторов разрешено в MySQL

# mysql -se "show variables like 'open_files_limit'" -uroot -p
Variable_name       Value
open_files_limit    1024

Исправление

nano /etc/security/limits.conf
Воставляем число файловых дескрипторов (для пользователя mysql)

mysql           hard    nofile          102400
mysql           soft    nofile          102400

Временно увеличиваем число открытых дескрипторов файлов
(настройки сохраняются до перезагрузки машины)
```
$ ulimit -n 102400
```
Проверить настройки можно
```
$ ulimit -a
```
nano /etc/mysql/my.cnf
Выставляем число одновременно открытых файлов в конфигурации
```
[mysqld]
open_files_limit = 8192
```

или

Выставляем число дескрипторов в разрешенных

echo 'mysql  -  nofile  8192' > /etc/security/limits.d/mysql.conf

Перезапускаем сервер
```
# service mysql restart
```

PAM (Аунтификация)

Если после перезапуска mysql не применил новые ограничения, значит PAM это запретил. Тогда добавляем разрешение в PAM.

Проверяем ограничения PAM
```
grep -r limits /etc/pam.*
```
Снимаем ограничение (Debian)

$ echo 'session required pam_limits.so' >> /etc/pam.d/common-session

$ echo 'session required pam_limits.so' >> /etc/pam.d/common-session-noninteractive

systemd (Менеджер загрузки)

Сбрасываем ограничения в systemd

echo "
[Service]
LimitNOFILE=infinity
LimitMEMLOCK=infinity" > /etc/systemd/system/mysqld.service

Перезагружаем настройки демона systemd
```
systemctl reload mariadb.service
```

Обслуживание MySql

Anonymous (anonymous@undisclosed.example.com) — 2018-06-17T20:34:00+00:00

mysql, sql, db, utils

Обслуживание MySql

Ошибки MySql/MariaDB
Сброс пароля root в MySQL
Система резервного копирования и восстановления данных для MySql - Архивирование БД (Ориентировался на Debian архитектуру)
Восстановление пользователя debian-sys-maint
Восстановление таблиц MySql
Восстановление таблиц из GZ файлов
sqlmap - Automatic SQL injection and database takeover tool

Быстродействие / Performance

my.cnf - Файл конфигурации mysql

Anonymous (anonymous@undisclosed.example.com) — 2015-10-05T11:22:00+00:00

mysql, my.cnf, innodb, mysam

my.cnf - Файл конфигурации mysql

nano /etc/mysql/my.cnf

MySAM

InnoDB

#
# * InnoDB
#
# InnoDB is enabled by default with a 10MB datafile in /var/lib/mysql/.
# Read the manual for more InnoDB related options. There are many!
 
innodb_buffer_pool_size = 20G
innodb_log_file_size = 256MB
innodb_log_buffer_size = 4MB
innodb_flush_log_at_trx_commit = 2
innodb_thread_concurrency = 8
innodb_flush_method = O_DIRECT
#transaction-isolation = READ-COMITTED
innodb_doublewrite=0
innodb_support_xa=0
#innodb_thread_concurrency=10
innodb_data_file_path=ibdata1:10M:autoextend
innodb_file_per_table=1
skip-innodb_doublewrite
innodb_file_format=barracuda
innodb_data_home_dir = /var/lib/mysql/
innodb_log_group_home_dir = /var/lib/mysql/

Описание

innodb_file_per_table
innodb_data_file_path
innodb_flush_log_at_trx_commit
innodb_doublewrite
innodb_support_xa - Если ее отключить, то проводки могут быть записаны в двоичный журнал в порядок отличаются от той, в которой живут база данных фиксирует их.
innodb_thread_concurrency - это максимальное количество потоков.

Система резервного копирования и восстановления данных для MySql

Anonymous (anonymous@undisclosed.example.com) — 2017-09-03T12:22:08+00:00

mysql, mysqldup, dump, restore, script

Система резервного копирования и восстановления данных для MySql

mysql_utils shell script!

Система написана на shell скрипте bash. Для создания резервных копий используется mysqldump. Для создания архивов используется bz2.

https://github.com/Mirocow/mysql_utils

Установка

cd ~
git clone https://github.com/Mirocow/mysql_utils.git
cd mysql_utils

Настройка

Для debian систем настройка будет выполнена автоматически. Для остальных необходимо создать файл.

# nano /etc/mysql/debian.cnf

# Automatically generated for Debian scripts. DO NOT TOUCH!
[client]
host     = localhost
user     = debian-sys-maint
password = master-password
socket   = /var/run/mysqld/mysqld.sock
[mysql_upgrade]
host     = localhost
user     = debian-sys-maint
password = master-password
socket   = /var/run/mysqld/mysqld.sock
basedir  = /usr

Сохранение всех баз

По умолчанию упаковывается bzip2 c параметром –compress=bzip2

# cd ~
# cd mysql_utils
# bash backup.sh --compress=bzip2 --exclude="mysql"

Запуск справки по скрипту

# bash backup.sh --help
usage: backup.sh options
 
This script buckup all databases.
 
Usage: backup.sh <[options]>
 
Options:
   -e= | --exclude=                     Exclude databases
   --exclude-tables=                    Exclude tables
   -c= | --compress=                    Compress with gzip or bzip2
   -v  | --verbose                      Add verbose into output
   -l  | --lifetime=                    Lifetime for dump files
   --config=                            Config file of Debian format
   --dir=                               Backup directory
   -h  | --help                         This text
 
Examples:
        backup.sh --verbose --compress=
        backup.sh --verbose --compress=zgip
        backup.sh --verbose --compress=bzip2
        backup.sh --verbose --compress= --exclude="mysql"
        backup.sh --verbose --compress= --exclude="mysql" --lifetime="3 day ago"
        backup.sh --verbose --config="/etc/mysql/debian.cnf" --exclude="mysql" --lifetime="1 day ago"
        backup.sh --verbose --dir="/var/backups/mysql" --config="/etc/mysql/debian.cnf" --exclude="mysql" --lifetime="1 day ago"
        backup.sh --verbose --dir="/home/backups/mysql" --exclude="mysql" --lifetime="1 day ago"
        backup.sh --verbose --dir="/home/backups/mysql" --exclude="mysql" --exclude-tables="tbl_template" --lifetime="1 day ago"

Восстановление баз за указанную дату

По умолчанию запакован c параметром –compress=bzip2

# cd /var/backups/mysql/[some date]
# bash ~/mysql_utils/restore.sh

Восстановление выбранной БД

По умолчанию запакован c параметром –compress=bzip2

# cd /var/backups/mysql/[some date]/[some db name]
# bash ~/mysql_utils/restore_db.sh

Установка заданий в cron

nano /etc/default/db_backup

START=yes

nano /etc/cron.daily/db_backup

#!/bin/sh
 
. /etc/default/db_backup
 
if [ "$START" = "yes" ]; then
    logger "Start databases backup system..."
    /bin/bash /root/scripts/mysql_utils/backup.sh --exclude="some_exclude_database"
fi

Проверка работы скрипта

# tail -f /var/log/syslog
    May 23 12:25:34 db1 logger: BACKUP:   ** Dump tecdoc.2013.ALI_COORD
    May 23 12:25:35 db1 logger: BACKUP:   ** set perm on tecdoc.2013/AL
    May 23 12:25:35 db1 logger: BACKUP:   ** bzip2 tecdoc.2013/ALI_COOR
    May 23 12:25:35 db1 logger: BACKUP:   ** Dump tecdoc.2013.ARTICLES
    May 23 12:25:43 db1 logger: BACKUP:   ** set perm on tecdoc.2013/AR
    May 23 12:25:43 db1 logger: BACKUP:   ** bzip2 tecdoc.2013/ARTICLES
    May 23 12:25:43 db1 logger: BACKUP:   ** Dump tecdoc.2013.ARTICLES_
    May 23 12:25:43 db1 logger: BACKUP:   ** set perm on tecdoc.2013/AR
    May 23 12:25:43 db1 logger: BACKUP:   ** bzip2 tecdoc.2013/ARTICLES
    May 23 12:25:43 db1 logger: BACKUP:   ** Dump tecdoc.2013.ARTICLE_C

MySql

Anonymous (anonymous@undisclosed.example.com) — 2023-11-10T13:08:03+00:00

Server, mysql, percona, mariadb, databases, errors

MySql

Установка

MariaDB 10:

$ apt-get install libmariadbclient18 libmysqlclient18 mariadb-client mariadb-client-10.0 mariadb-client-core-10.0 mariadb-common  mariadb-server

Percona 5.6:

$ install percona-server-common-5.6 percona-server-server percona-server-client

Инициализация

dpkg-reconfigure mysql-server-5.1 - запуск настройки
mysql_upgrade -u root -p --force - ремонт баз данных
mysqlcheck -uroot -p --auto-repair --check --optimize --all-databases - ремонт баз данных

mysql_install_db - создание mysql database
mysql_install_db --rpm --user=mysql
mysql_install_db --defaults-file=/etc/mysql/my.cnf
mysql_install_db --no-defaults --basedir=/usr --datadir=/var/lib/mysql
mysql_install_db --defaults-file=/etc/mysql/my.cnf --force --basedir=/usr --datadir=/var/lib/mysql --user=mysql

Настройка, оптимизация и обслуживание

Описание движков и их особенностей

Клиенты / Утилиты

DBeaver (Windows, MacOS, Linux) на базе eclipse
Система резервного копирования и восстановления данных для MySql - Архивирование БД (Ориентировался на Debian архитектуру)
Миграции
http://www.chive-project.com
https://www.phpmyadmin.net/
http://www.enginsite.com/MySQL-client-manager-and-GUI-for-MySQL.htm
http://www.heidisql.com/
https://www.adminer.org/ (1 файл)
http://www.sequelpro.com/ (MacOS)

Ссылки / Документация / Примеры

Примеры

Закрепить запись наверху при выборке
выбрать записи с определёнными id соблюдая порядок
MySQL - UPDATE query based on SELECT Query / Обновление самого себя How can i update itself in mysql/mariadb
SQL - Запросы
FIELD_IN_SET()
deadlock - Взаимная блокировка

Ссылки / Документация

Mytop

Anonymous (anonymous@undisclosed.example.com) — 2018-06-20T16:40:25+00:00

shell, utils, mysql

Mytop

mytop is a console-based (non-gui) tool for monitoring the threads and overall performance of a MySQL 3.22.x, 3.23.x, and 4.x server. It runs on most Unix systems (including Mac OS X) which have Perl, DBI, and Term::ReadKey installed. And with Term::ANSIColor installed you even get color. If you install Time::HiRes, you'll get good real-time queries/second stats. As of version 0.7, it even runs on Windows (somewhat).

Установка

$ wget http://jeremy.zawodny.com/mysql/mytop/mytop-1.6.tar.gz
$ tar xvfz mytop-1.6.tar.gz
$ cpan install Config::IniFiles

Использование

Мониторнг базы данных MySQL или MariaDB

mytop -u root -p password
mytop -S /var/run/mysqld/mysqld.sock -u root -p password -s 1

Пользовательските настройки

nano ~/.mytop

user=root
pass=password
host=localhost
delay=5
port=3306
socket=
batchmode=0
header=1
color=1
idle=1

Debian

mytop -S /var/run/mysqld/mysqld.sock -u debian-sys-maint -p $(cat /etc/mysql/debian.cnf|grep password|sed 's/password = //'|head -n 1) -s 1

Оптимизация работы MySql

Anonymous (anonymous@undisclosed.example.com) — 2018-06-21T12:53:28+00:00

mysql, sql, optimize

Оптимизация работы MySql

Анализ окружения

SHOW VARIABLES LIKE '%trx%';
 
SHOW VARIABLES LIKE '%innodb%';
 
SHOW VARIABLES LIKE '%cache%';

Настройка

key_buffer_size = 512M Таким образом выделяем 512 Mb под индексы таблиц MyISAM. Дело в том, что у меня половина баз в MyISAM (так исторически сложилось). На 99,9% эти базы используются на чтение, так что переходить на InnoDB смысла нет.

innodb_buffer_pool_size = 512M Такой же объем памяти выделяем на таблицы InnoDB. Тут нужно знать меру. Если у вас 1 база размером 100 Mb, то нет смысла выделять 1 Гб памяти – она всё равно не будет использована. Во-вторых, нужно смотреть не на размер таблицы, а на размер индексов. Пример из жизни: таблица 300 000 комментариев весит 300 Мб, а ее индексы занимают в 15 раз меньше, что вполне логично, так как обычно индексы расставляются на числовые и временные столбцы, а не на текст.

innodb_additional_mem_pool_size = 16M Размер памяти, выделяемый InnoDB для хранения различных внутренних структур.

innodb_flush_method = O_DIRECT Тут мы вырубаем буферизацию таблиц для файловой системы и говорим MySQL обращаться к файлам напрямую.

innodb_flush_log_at_trx_commit = 2 При каждой транзакции MySQL пишет лог и сбрасывает на диск (значение 1). Значение 2 – сбрасываем в память. Мне не критично потерять транзакции за последние 2 секунды в случае падения сервера.

join_buffer_size = 8M Память для запросов с джойнами, когда объединение происходит без использования индексов.

sort_buffer_size = 8M read_rnd_buffer_size = 8M Полезно для запросов с сортировкой ORDER BY и группировкой GROUP BY. При малом значении сортировка идет во временной таблице на диске.

tmp_table_size = 64M max_heap_table_size = 32M Настройки для хранения временных таблиц в памяти. Временные таблицы часто образуются при больших джойнах.

table_cache = 256 Максимальное число одновременно открытых таблиц. Количество одновременных соединений * количество открытых таблиц в соединении Т.е. для каждого соединения используется свои ячейки из кэша.

log_slow_queries = /var/log/mysql/mysql-slow.log long_query_time = 1 Пишем в лог медленные запросы - http://ekimoff.ru/403/

query_cache_type = 2 query_cache_limit = 1M query_cache_size = 32M Кэширование запросов внутри MySQL - http://ekimoff.ru/384/

Пример конфигурации

[mysqld]

interactive_timeout=180
wait_timeout=180

#collation_server=utf8_general_ci
#character_set_server=utf8
#default-character-set = utf8
default-storage-engine = InnoDB
key_buffer_size = 64M

join_buffer_size = 8M
sort_buffer_size = 8M
read_rnd_buffer_size = 8M
tmp_table_size = 128M
max_heap_table_size = 64M
table_cache = 256
table_open_cache = 64

query_cache_type = 2
query_cache_limit = 64M
query_cache_size  = 64M

innodb_buffer_pool_instances = 2
innodb_buffer_pool_size = 2G
innodb_log_file_size = 256MB
innodb_log_buffer_size = 4MB
innodb_flush_log_at_trx_commit = 2
innodb_thread_concurrency = 8
innodb_flush_method = O_DIRECT
innodb_additional_mem_pool_size = 16M
#transaction-isolation = READ-COMITTED
innodb_doublewrite=0
innodb_support_xa=0
#innodb_thread_concurrency=10
innodb_data_file_path=ibdata1:10M:autoextend
innodb_file_per_table=1
skip-innodb_doublewrite
innodb_file_format=barracuda
#skip-name-resolve=1

long_query_time = 10
log-queries-not-using-indexes = 1
slow_query_log_file = /var/log/mysql/mysql-slow.log
slow_query_log = 1

Анализ запросов

Утилита mysqldumpslow

# mysqldumpslow -s at -t 10
 
Reading mysql slow query log from /var/log/mysql/mysql-slow.log
Count: 1  Time=0.00s (0s)  Lock=0.00s (0s)  Rows_sent=1.0 (1), Rows_examined=2.0 (2), Rows_affected=0.0 (0), root[root]@localhost
  SELECT kc.CONSTRAINT_NAME,kc.TABLE_NAME,kc.COLUMN_NAME,kc.ORDINAL_POSITION
  FROM INFORMATION_SCHEMA.KEY_COLUMN_USAGE kc WHERE kc.TABLE_SCHEMA='S' AND kc.REFERENCED_TABLE_NAME IS NULL AND kc.TABLE_NAME='S'
  ORDER BY kc.CONSTRAINT_NAME,kc.ORDINAL_POSITION

Наблюдение в реальном времени

$ watch --interval=1 mysqldumpslow -s at -t 10

SQL Slow Query Monitor

Count — количество вхождений запроса в лог;
Time — среднее и общее время запроса;
Lock — время блокировки таблицы;
Rows — Количество выбранных строк

Параметры

-s at
-t 10
/var/log/mysql/slow.log

Mytop

Explain

Сетевые подключения

$ netstat -ntp | grep :51244
tcp        0      0 127.0.0.1:3306          127.0.0.1:51244         ESTABLISHED 8552/mysqld
tcp        0      0 127.0.0.1:51244         127.0.0.1:3306          ESTABLISHED 24492/sshd: ro

где 45384 - можно получить из show full processlist;

6	root	localhost		Sleep	0			0
2003	root	localhost:51244	skringo	Query	0	init	show full processlist	0

Статьи

Профилирование MYSQL

Anonymous (anonymous@undisclosed.example.com) — 2015-12-01T22:56:46+00:00

Профилирование MYSQL

Pinba

Pinba — бесплатный серверный программный инструмент для сбора статистики и мониторинга PHP скриптов в реальном времени, использующий базу данных MySQL в качестве интерфейса. Предназначен для высоконагруженных проектов с большим количеством кода. Распространяется под лицензией GNU GPL.

Pinba получает статистические данные от потоков PHP через протокол UDP, что позволяет использовать его на высоконагруженных production-серверах, не замедляя их работу. Pinba не является инструментом для отладки приложений, однако позволяет находить узкие места в продукте, оценивать время исполнения фрагментов кода, количество вызовов функций, возникающие ошибки и т. д.

Отчёты, формируемые Pinba, в дальнейшем могут обрабатываться и показываться в удобном интерфейсе для разработчиков. Pinba формирует два вида отчётов: общие данные по времени исполнения скриптов, CPU, потребление памяти, объём данных с разбивкой по скрипту; данные по пользовательским таймерам, добавленным в код продукта.

Статистические данные в сервере циклически очищаются — предполагается, что данные должны использоваться немедленно или в течение минимального времени, необходимого на их обработку.

http://pinba.org/

Устанока

$ brew tap in2pire/pinba
$ brew install mysql-engine-pinba
$ brew install percona-engine-pinba

https://github.com/tony2001/pinba_engine

Клиенты

Статьи

Восстановление таблиц из GZ файлов

Anonymous (anonymous@undisclosed.example.com) — 2013-07-29T11:09:14+00:00

Восстановление таблиц из GZ файлов

find . -name '*.sql' | awk '{ print "source",$0 }' | mysql --defaults-extra-file= --batch

gunzip ./*.gz
cat ./*.sql > dump.sql
mysql -u root -p TABLE_NAME < dump.sql

SQL Slow Query Monitor

Anonymous (anonymous@undisclosed.example.com) — 2016-05-10T10:25:07+00:00

SQL Slow Query Monitor

Console

$ mysqldumpslow

Ответ:

Count: 1  Time=14.14s (14s)  Lock=0.00s (0s)  Rows_sent=6.0 (6), Rows_examined=102406.0 (102406), vse2_reklamu_ru[vse2_reklamu_ru]@[89.235.136.115]
  SELECT DISTINCT(f.id) id, RAND() AS rand FROM tbl_form f  INNER JOIN tbl_location_form lf ON f.id = lf.form_id
  INNER JOIN tbl_point p ON p.location_id = lf.location_id
  INNER JOIN tbl_category_mark_model_form mmf ON f.id = mmf.form_id AND mmf.mark_id = N AND mmf.model_id = N WHERE  f.type = 'S' AND f.status IN ("S", "S") AND MBRContains(GeomFromText('S'), p.location ) GROUP BY f.id