Профилирование запросов Mnesia

Ответ 1

Я откинулся назад, потому что я не очень разбираюсь ни в Эрланге, ни в Mnesia, но я знаю много о настройке производительности, и из обсуждения пока это звучит довольно типично.

Эти инструменты fprof и т.д. звучат как большинство инструментов, которые получают свой фундаментальный подход от gprof, а именно: инструменты, подсчет вызовов, выборку счетчика программ и т.д. Немногие имеют долгое время изучали основы этой практики. Ваши разочарования звучат типично для пользователей таких инструментов.

Здесь известен менее известный метод описанный здесь. Он основан на принятии небольшого количества (10-20) выборок состояния программы в случайные моменты времени и понимания каждого из них, а не суммирования. Как правило, это означает проверку стека вызовов, но вы также можете изучить другую информацию. Существуют разные способы сделать это, но я просто использую кнопку паузы в отладчике. Я не пытаюсь получить точное время или количество вызовов. В лучшем случае это косвенные подсказки. Вместо этого я прошу каждого образца "Что он делает и почему?" Если я нахожу, что он выполняет определенную деятельность, например, выполняя X-запрос, где он ищет ответ типа y для цели z, и он делает это на более чем одном образце, тогда доля выборок, которые он делает, является грубая, но достоверная оценка того, какая часть времени она делает. Скорее всего, это то, над чем я могу что-то сделать, и получить хорошее ускорение.

Вот пример использования метода.

Ответ 2

Поскольку запросы Mnesia - это просто функции erlang, я бы предположил, что вы можете профилировать их так же, как и профиль вашего собственного кода erlang. http://www.erlang.org/doc/efficiency_guide/profiling.html#id2266192 содержит дополнительную информацию о доступных инструментах профилирования erlang.

Обновление. В качестве теста я запускал это дома на экземпляре тестовой mnesia и с помощью fprof для отслеживания запроса mnesia qlc возвращал вывод, образец которого я включаю ниже. Таким образом, он определенно содержит больше информации, чем просто запрос.

....
{[{{erl_lint,pack_errors,1},                      2,    0.004,    0.004}],     
 { {lists,map,2},                                 2,    0.004,    0.004},     %
 [ ]}.

{[{{mnesia_tm,arrange,3},                         1,    0.004,    0.004}],     
 { {ets,first,1},                                 1,    0.004,    0.004},     %
 [ ]}.

{[{{erl_lint,check_remote_function,5},            2,    0.004,    0.004}],     
 { {erl_lint,check_qlc_hrl,5},                    2,    0.004,    0.004},     %
 [ ]}.

{[{{mnesia_tm,multi_commit,4},                    1,    0.003,    0.003}],     
 { {mnesia_locker,release_tid,1},                 1,    0.003,    0.003},     %
 [ ]}.

{[{{mnesia,add_written_match,4},                  1,    0.003,    0.003}],     
 { {mnesia,add_match,3},                          1,    0.003,    0.003},     %
 [ ]}.

{[{{mnesia_tm,execute_transaction,5},             1,    0.003,    0.003}],     
 { {erlang,erase,1},                              1,    0.003,    0.003},     %
 [ ]}.

{[{{mnesia_tm,intercept_friends,2},               1,    0.002,    0.002}],     
 { {mnesia_tm,intercept_best_friend,2},           1,    0.002,    0.002},     %
 [ ]}.

{[{{mnesia_tm,execute_transaction,5},             1,    0.002,    0.002}],     
 { {mnesia_tm,flush_downs,0},                     1,    0.002,    0.002},     %
 [ ]}.

{[{{mnesia_locker,rlock_get_reply,4},             1,    0.002,    0.002}],     
 { {mnesia_locker,opt_lookup_in_client,3},        1,    0.002,    0.002},     %
 [ ]}.

{[ ],
 { undefined,                                     0,    0.000,    0.000},     %
 [{{shell,eval_exprs,6},                          0,   18.531,    0.000},      
  {{shell,exprs,6},                               0,    0.102,    0.024},      
  {{fprof,just_call,2},                           0,    0.034,    0.027}]}.

Ответ 3

Предложение Майка Данлави напоминает мне о redbug, который позволяет вам выбирать вызовы в производственных системах. Подумайте об этом как о удобном в использовании erlang:trace, который не даст вам достаточно веревки, чтобы повесить вашу производственную систему.

Использование чего-то вроде этого вызова должно дать вам много трасс стека, чтобы определить, откуда вы вызываете транзакции mnesia:

redbug:start(10000,100,{mnesia,transaction,[stack]}).

Невозможно получить длительность вызова для этих трасс.

Если вы организовали все поиски mnesia в модулях, которые экспортируют api для их выполнения, вы также можете использовать redbug для получения частоты вызовов только для определенных запросов.