Встроенные методы отбора признаков отличаются от фильтрационных тем, что первые выполняются в процессе обучения модели, а вторые — независимо от какого-либо алгоритма обучения. 25
Фильтрационные методы оценивают признаки на основе их статистических свойств. 1 Они рассматривают каждый признак изолированно, не учитывая их взаимное влияние друг на друга и на целевую переменную. 3 К таким методам относятся, например, корреляционный анализ, статистические тесты и ранжирование признаков. 1
Встроенные методы не разделяют отбор признаков и обучение классификатора, а выделяют предикторы во время процесса расчёта модели. 3 Эти алгоритмы требуют меньше вычислений, чем обёрточные методы, но больше, чем фильтрация. 3 Основным методом этой категории является регуляризация — добавление дополнительных ограничений (штрафов) к условиям задачи, чтобы построить алгоритм, минимизирующий ошибку и количество используемых переменных. 3
Таким образом, встроенные методы выполняют отбор признаков как часть обучения модели, в то время как фильтрационные методы оценивают признаки независимо от используемой модели машинного обучения. 15