Некоторые современные способы деления больших объёмов данных на малые группы:

• Кластеризация. 14 Это разделение большой группы объектов на несколько поменьше (кластеров) на основе конкретного критерия (размер, форма, категория, вид). 1 Для кластеризации больших объёмов данных используются, например, модификации алгоритма K-means (Mini-Batch K-means, Parallel K-means), алгоритм DBSCAN, иерархическая кластеризация. 2

• Партиционирование. 3 Это механизм разделения больших массивов данных (обычно, в базах данных) на меньшие части для повышения производительности, доступности данных и балансировки нагрузки. 3 Выделяют три вида партиционирования: вертикальное (данные разбиваются таким образом, чтобы таблицы, которые относятся к определённому домену, находились на выделенных серверах), горизонтальное (записи одного типа распределяются в разных таблицах) и основанное на поисковом сервисе (отдельный сервис за пределами БД определяет, в какую партицию записывать новые данные). 3

• Разделение на основе диапазона. 5 Предполагает разделение данных на основе определённого диапазона значений для заданного ключа. 5 Например, можно разделить записи о клиентах на основе диапазона их идентификаторов. 5

• Разделение на основе хэша. 5 Предполагает применение хэш-функции к ключу шарда, по полученному хэшу определяется, к какому шарду относятся данные. 5 Такая стратегия обеспечивает более равномерное распределение данных по хранилищам. 5