В чём разница между действиями и преобразованиями в Apache Spark?

Разница между действиями и преобразованиями в Apache Spark заключается в следующем:

1. Преобразования (transformations) — это операции, которые создают новое распределённое множество данных (RDD) из существующего, но не выполняют никаких вычислений сразу. habr.com Трансформации являются ленивыми и не выполняются до тех пор, пока не будет вызвано действие. habr.com Примерами преобразований являются filter, flatMap, reduceByKey, groupByKey. habr.com
2. Действия (actions) — это операции, которые запускают выполнение вычислений и возвращают результат. habr.com Действия требуют выполнения всех предшествующих трансформаций. habr.com Примерами действий являются count, collect, take, saveAsTextFile. habr.com

Таким образом, преобразования возвращают RDD, в то время как действия возвращают другие типы данных. docs.exponenta.ru

Пользователь

Время добавления