Объедините два фрейма данных PySpark

df_concat = df_1.union(df_2)

Фреймы данных могут иметь python-shell идентичные столбцы, и в этом apache-spark случае вы можете использовать python-interpreter withColumn() для создания normal_1 и normal_2

python

apache-spark

pyspark

2022-10-26T22:37:21+00:00
Вопросы с похожей тематикой, как у вопроса:

Объедините два фрейма данных PySpark

Импорт pyspark в оболочку python

PySpark Drop Rows

Установка SparkContext для pyspark

Как отключить ведение журнала INFO в Spark?

Преобразование простой однострочной строки в RDD в Spark

В чем разница между spark-submit и pyspark?

Превратите пару ключ-значение в пару списка ключей с помощью Apache Spark

Как добавить сторонние файлы Java JAR для использования в PySpark

Как удалить RDD в PySpark с целью высвобождения ресурсов?

Загрузить файл CSV с помощью Spark

Как получить доступ к SparkContext в скрипте pyspark

Как преобразовать DataFrame обратно в обычный RDD в pyspark?

Показать разделы на RDD pyspark

Обновление столбца фрейма данных в Spark