Результаты тестов PHP Benchmark могут меняться от перезапуска к перезапуску из-за особенностей предварительной загрузки (preload) в PHP 7.4. 12
Она иногда может приводить к сбою PHP-FPM при перезапуске, а иногда и не приводить к сбою. 2 Чтобы избежать этого, рекомендуется попробовать получить статистику несколько раз, каждый раз перезапуская PHP FPM. 2
Также при перезапуске очищается OPcache, и все запросы после него будут работать с холодным опкод-кешем, что может увеличить время ответа. 5
Ещё одна возможная причина нестабильности результатов тестов — ошибки в самом тесте или тестируемом приложении. 3 Например, если тест то падает, то нет, это может указывать на то, что он написан неправильно или в тестируемом приложении есть ошибка, которая воспроизводится при определённой последовательности шагов. 3