Big Data — это серия подходов, инструментов и методов, используемых для обработки структурированных и неструктурированных данных огромных объёмов и значительного разнообразия. 1 Ключевые свойства больших данных: объём, скорость и разнообразие. 1

Hadoop — это программная среда с открытым исходным кодом, которая предназначена для хранения и обработки больших данных. 23 Она позволяет хранить и обрабатывать структурированные, полуструктурированные и неструктурированные данные. 2

Основные компоненты Hadoop:

• HDFS — распределённая файловая система, позволяющая хранить информацию практически неограниченного объёма; 4
• Hadoop YARN — фреймворк для управления ресурсами кластера и менеджмента задач, в том числе включает фреймворк MapReduce. 4