Какие методы используются для поиска экстремальных значений в массивах данных?

Некоторые методы, которые используются для поиска экстремальных значений (выбросов) в массивах данных:

• Экстремальный анализ данных (англ. extreme value analysis). neerc.ifmo.ru Обычно этот метод применим для одномерного случая. neerc.ifmo.ru Алгоритм включает визуализацию данных с помощью диаграмм и гистограмм, поиск значений, чьё стандартное отклонение отличается в 2–3 раза от математического ожидания или в полтора раза от первой либо третьей квартилей, и фильтрацию предполагаемых выбросов из обучающей выборки. neerc.ifmo.ru
• Аппроксимирующий метод (англ. proximity method). neerc.ifmo.ru Метод заключается в применении кластеризующих методов. neerc.ifmo.ru Алгоритм включает определение кластеров в данных, идентификацию и отметку центроидов каждого кластера, соотнесение кластеров с экземплярами данных, находящимися на фиксированном расстоянии или на процентном удалении от центроида соответствующего кластера, и фильтрацию предполагаемых выбросов из обучающей выборки. neerc.ifmo.ru
• Проецирующие методы (англ. projections methods). neerc.ifmo.ru Эти методы быстро и просто определяют выбросы в выборке. neerc.ifmo.ru Алгоритм включает использование одного из проецирующих методов, например, метода главных компонент, самоорганизующихся карт Кохонена или проекции Саммона, для суммирования обучающих данных в двух измерениях, визуализацию отображения, использование критерия близости от проецируемых значений или от вектора таблицы кодирования для идентификации выбросов, и фильтрацию предполагаемых выбросов из обучающей выборки. neerc.ifmo.ru
• Метрические методы. alexanderdyakonov.wordpress.com В них постулируется существование некоторой метрики в пространстве объектов, которая и помогает найти аномалии. alexanderdyakonov.wordpress.com Например, хорошей мерой аномальности может служить «расстояние до k-го соседа». alexanderdyakonov.wordpress.com Здесь используются специфические метрики, например, расстояние Махаланобиса. alexanderdyakonov.wordpress.com

Нет универсального метода или алгоритма поиска экстремальных значений, так как существует много критериев и подходов для идентификации выбросов. loginom.ru Решение о том, что правильнее применить, остаётся за аналитиком. loginom.ru