В чём разница между функциями rlike() и contains() в PySpark?

Разница между функциями rlike() и contains() в PySpark заключается в том, что первая поддерживает более сложные запросы, а вторая — только простые. sparkbyexamples.com

contains() позволяет искать простые подстроки. sparkbyexamples.com Например, можно отфильтровать строки, в которых определённый столбец содержит подстроку «abc». www.everythingspark.com

rlike(), в свою очередь, даёт возможность выполнять сложные запросы на основе регулярных выражений (regex). sparkbyexamples.com По умолчанию функция чувствительна к регистру, но можно сделать её нечувствительной к нему, добавив флаг (?i) в начале шаблона. sparkbyexamples.com

Таким образом, rlike() предлагает большую гибкость, особенно при работе с чувствительными к регистру поисками, созданием сложных шаблонов для соответствия или исключением определённого текста. sparkbyexamples.com