Pyspark заменяет строки в столбце кадра данных Spark ⇐ Python

[Anonymous]

Я хотел бы выполнить базовую обработку столбца Spark Dataframe, заменив подстроки. Какой самый быстрый способ сделать это?

В моем текущем варианте использования у меня есть список адресов, которые я хочу нормализовать. Например, этот фрейм данных:

id address
1 2 foo lane
2 10 bar lane
3 24 pants ln


Станет

id address
1 2 foo ln
2 10 bar ln
3 24 pants ln


Подробнее здесь: https://stackoverflow.com/questions/370 ... ame-column