Apache Spark Left Join DataBricks PythonPython

Программы на Python
Ответить Пред. темаСлед. тема
Anonymous
 Apache Spark Left Join DataBricks Python

Сообщение Anonymous »

У меня есть три диапазона данных в данных Databricks, и я пытаюсь запустить соединение на них (функции Apache Spark). В основном я использовался для соединения DataFrame Pandas. Мой текущий код: < /p>

Код: Выделить всё

joined_df = df_1.join(df_2, df_1["RECONTRACT"] == df_2["RECONTRACT"], "left")
joined_df = joined_df.join(df_3, joined_df["RENTOBJECT"] == df_3["RENTOBJECT"], "left")
< /code>
Итак, моя цель - присоединиться к DF_2 и DF_3 к DF_1 (оба левых соединения) < /p>
Но я получаю ошибку: < /p>

RENTOBJECT
, rentObject , rentObject ]. SQLState: 42704 < /p>
< /blockquote>
Может ли быть так, что у меня есть дубликат? Как я могу избежать ошибки? В Pandas я использовал, что дублирующиеся столбцы получают Rennamemed на: colub_x и colub_y

Подробнее здесь: https://stackoverflow.com/questions/795 ... databricks
Реклама
Ответить Пред. темаСлед. тема

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

  • Похожие темы
    Ответы
    Просмотры
    Последнее сообщение

Вернуться в «Python»