Особенности пакетной обработки данных:

• Обработка пакетами. 1 Массив информации, сходной по смыслу или формату, помещают в контейнер, а потом производят над ней какое-то действие. 1 Например, изменяют или отбирают нужные файлы по заданным критериям. 1 Выбранное действие применяется сразу ко всем файлам, байтам или записям в пакете. 1
• Группировка данных. 1 Информацию группируют по времени создания, типу данных или источнику. 1 Например, в один пакет помещают все файлы, поступившие на сервер компании за последние 30 минут, а в другой — записи о перемещениях грузов на складе и внутри магазина. 1
• Применение операций. 1 Выбранная операция применяется к каждому элементу пакета. 1 Например, если это картинки, можно скорректировать цвета или повернуть их на 90 градусов. 1 Если это видео — обрезать первые 30 секунд и добавить надпись поверх. 1
• Фильтрация. 1 Можно фильтровать файлы внутри пакета — например, оставить в нём только картинки с котами и удалить все остальные. 1 Или фильтровать пакет в целом — пропускать данные на дальнейшую обработку тогда, когда в нём встретились только картинки с котами. 1 Если внутри встретится хоть одна фотка собаки — пакет целиком отбрасывается. 1

Пакетная обработка подходит для сценариев, предполагающих полное обобщение и агрегирование набора данных, например, для анализа исторических данных. 3