Вопросы к Поиску с Алисой
По информации от 2021 года, функция torch.autograd.setdetectanomaly(True) может вызывать утечку памяти из-за хранения дополнительных метаданных при создании каждого узла обратного графа. github.com В частности, сохраняется текущая трассировка стека выполнения прямого исполнения. github.com
Кроме того, этот режим может значительно замедлить работу кода, поэтому его рекомендуют использовать только во время отладки и отключать после устранения ошибок. discuss.pytorch.org github.com