5.1.4 Набор тестов MySQL (The MySQL Benchmark Suite)

В данном разделе будет находиться техническое описание набора эталонных тестов MySQL (и crash-me), но оно пока еще не написано. В настоящее время можно получить хорошее представление об эталонном тесте, глядя на код и результаты в каталоге `sql-bench' любого исходного дистрибутива MySQL.

Данный набор эталонных создан с целью обеспечить эталонный тест, который будет информировать любого пользователя о том, что в данной реализации SQL выполняется хорошо, а что плохо.

Обратите внимание: этот эталонный тест - однопоточный, так что в нем измеряется минимальное время выполнения операций. В будущем мы планируем добавить в данный набор большое количество многопоточных тестов.

Например (выполнено на одной машине под NT 4.0):

В предыдущем тесте MySQL запускался с 8-мегабайтным индексным кэшем.

Гораздо больше результатов тестов вы сможете найти по адресу http://www.mysql.com/information/benchmarks.html.

Обратите внимание: данные об Oracle отсутствуют - по просьбе компании Oracle вся информация по их продукту была удалена. Все эталонные тесты для Oracle должны быть пропущены через компанию Oracle! Мы считаем, однако, что при таком способе тестирования результаты эталонных тестов для Oracle будут в очень высокой степени различаться, поскольку приведенные на сайте результаты призваны показывать на что способна стандартная инсталляция для одного клиента.

Чтобы выполнить набор эталонных тестов, необходимо загрузить исходный дистрибутив MySQL, установить драйвер perl DBI, драйвер perl DBD для той базы данных, которую нужно проверить, а затем выполнить:

cd sql-bench
perl run-all-tests --server=#

где # - один из поддерживаемых серверов. Список всех опций и поддерживаемых серверов можно получить, выполнив run-all-tests --help.

Программа crash-me пытается определить, какие функции поддерживаются СУБД, и какие возможности и ограничения имеют эти функции при выполнении запросов. Например, она определяет следующее:

• какие типы столбцов поддерживаются
• сколько индексов поддерживается
• какие функции поддерживаются
• насколько большим может быть запрос
• насколько большим может быть столбец VARCHAR

Результат, полученные crash-me для большого количества различных СУБД, можно найти по адресу: http://www.mysql.com/information/crash-me.php.

User Comments

I had trouble with this.

0) Couldn't get the MySQL-bench-3.23.51-1.rpm to
install as it complains about MySQL-DBI-perl-bin.
But I'm sure I have that installed from the default
redhat 7.2 install as I can do queries from Perl all day
long. Sigh. So instead I worked off the source
distrubution.
1) The scripts end in .sh. The instructions and
readme assume they don't
2) The automake won't run since there is no
configure.in. Not sure what I need automake for,
anyway...
3) At least on my (linux) system, the @PERL@
statement at the top didn't work. I strongly suspect
my Perl inexperience is to blame and that there's a
smart way to fix this, but I went ahead and had to
replace all occurences with #!/usr/bin/perl (which
obviously won't work for everybody depending on
perl's location)
4) Even with all this, the run-all-tests script did
nothing and said everything was ok. I could run all
the tests individually, though.
5) The instruction might helpfully mention that
you
need a 'test' database. I had deleted mine. Or
better yet, the script could create the database if it
doesn't exist.

I documented my experience <A
HREF="http://www.mattwalsh.com/twiki/bin/view/M
ain/HowToRunTheMysqlBenchmarks">on my site
here:</A>

Problem 0) reported by Matt (regarding MySQL-bench
not installing from the RPM) persists through version
3.23.53a-1. The problem seems to be that
the MySQL-DBI-perl-bin package required by
MySQL-bench is actually called Mysql-DBI-perl-bin
(case matters)

Workaround: repackage Mysql-DBI-perl-bin as
MySQL-DBI-perl-bin. ALternatively, you can
do a search and replace on Mysql-DBI-perl-bin.rpm
and replace all instances of Mysql-DBI with MySQL-DBI.

Djun

Add your own comment.