В чем преимущества метода tokenize перед split в Groovy?

Некоторые преимущества метода tokenize перед split в Groovy:

• Игнорирование пустых строк. github.com www.tothenew.com Метод tokenize игнорирует пустую строку, когда разделитель появляется дважды подряд, в то время как split её сохраняет. github.com www.tothenew.com
• Использование каждого символа строки в качестве разделителя. github.com www.tothenew.com Метод tokenize использует каждый символ строки в качестве разделителя, в то время как split берёт в качестве разделителя всю строку. github.com www.tothenew.com
• Поддержка работы с несколькими разделителями. freelanceshack.com Метод tokenize позволяет разделить строку по нескольким символам. freelanceshack.com
• Более эффективный расход памяти. freelanceshack.com Метод split создаёт массив подстрок, что может потреблять больше памяти по сравнению с другими методами, которые возвращают список или итератор разделённых частей. freelanceshack.com

Выбор между tokenize и split зависит от конкретных требований к обработке строк. freelanceshack.com