Чем отличаются методы withColumn и select при добавлении столбцов в DataFrame?

Методы withColumn и select отличаются при добавлении столбцов в DataFrame: bigdataschool.ru www.mungingdata.com

• withColumn проецирует все столбцы из DataFrame и добавляет один новый с заданным именем. bigdataschool.ru Если вызывать этот метод несколько раз, это может повлиять на производительность, так как создаётся новый DataFrame. stackforgeeks.com
• select позволяет добавлять несколько столбцов сразу, избегая проблем с производительностью. stackforgeeks.com Метод проецирует только те столбцы, которые передаются в качестве аргумента. bigdataschool.ru Если в результате нужны все остальные столбцы, их нужно перечислить явно или использовать обозначение со звёздочкой (df.select(‘*’, …)). bigdataschool.ru

Таким образом, withColumn подходит для однократного или небольшого количества преобразований конкретных столбцов, а select — когда известна схема и нужно избежать дублирования. stackforgeeks.com