Объединение нескольких файлов паркета в один файл в Python

Объединение нескольких файлов паркета в один файл в Python ⇐ Python

1 сообщение • Страница 1 из 1

Anonymous

Объединение нескольких файлов паркета в один файл в Python

Цитата

Сообщение Anonymous » 07 ноя 2024, 00:50

Мне нужно объединить несколько файлов паркета в Python в один файл паркета. Например, у меня есть 3 файла, как показано ниже:
Файл1
StudentId Имя студента Адрес1 Адрес2 Почтовый индекс города
Файл2
Идентификатор студента Имя учащегося МатематикаОценка НаукаОценка ИсторияОценка
Файл3
StudentId StudentName EnglishGrade SpanishGrade
Мне нужно объединить эти файлы по ключевым полям (StudentId и StudentName) и создать один файл, как показано ниже
Выходной файл
Идентификатор студента Имя учащегося Адрес1 Адрес2 Город Почтовый индекс АнглийскийОценка ИспанскийОценка МатематикаОценка Наука История оценокОценка
Нужны ваши помогите сделать это с помощью pyspark или pandas
Большинство решений, которые я вижу в Интернете, объединяют несколько файлов с одной и той же схемой. Не объединение.

Подробнее здесь: https://stackoverflow.com/questions/791 ... -in-python

1730929802

Anonymous

Мне нужно объединить несколько файлов паркета в Python в один файл паркета. Например, у меня есть 3 файла, как показано ниже:
[b]Файл1[/b]
StudentId Имя студента Адрес1 Адрес2 Почтовый индекс города
[b]Файл2[/b]
Идентификатор студента Имя учащегося МатематикаОценка НаукаОценка ИсторияОценка
[b]Файл3[/b]
StudentId StudentName EnglishGrade SpanishGrade
Мне нужно объединить эти файлы по ключевым полям (StudentId и StudentName) и создать один файл, как показано ниже
[b]Выходной файл[/b]
Идентификатор студента Имя учащегося Адрес1 Адрес2 Город Почтовый индекс АнглийскийОценка ИспанскийОценка МатематикаОценка Наука История оценокОценка
Нужны ваши помогите сделать это с помощью pyspark или pandas
Большинство решений, которые я вижу в Интернете, объединяют несколько файлов с одной и той же схемой. Не объединение. 

Подробнее здесь: [url]https://stackoverflow.com/questions/79163897/concatenate-multiple-parquet-files-into-single-file-in-python[/url]