Ошибка типа: объект "Фрейм данных" не поддерживает назначение элементов при использовании разделения

Question 1

Ошибка типа: объект "Фрейм данных" не поддерживает назначение элементов при использовании разделения.

Разделение двух целых столбцов в фрейме данных pyspark и получение этой ошибки. Есть какие-нибудь идеи?

Воспроизводимый:

simpleData = (((1, 2), (2, 6), (3, 6))
columns= ["sales","users"]
df = spark.createDataFrame(data = simpleData, schema = columns)
df = df.withColumn("users", df["users"].cast(IntegerType()))
df = df.withColumn("sales", df["sales"].cast(IntegerType()))
df['buy_rate'] = df['sales']/ df['users']

Question 2

просто небольшая хитрость .

from pyspark.sql.types import IntegerType
import pyspark.sql.functions as F
simpleData=((1, 2), (2, 6), (3, 6))
columns= ["sales","users"]
df = spark.createDataFrame(data = simpleData, schema = columns)
df = df.withColumn("users", df["users"].cast(IntegerType()))
df = df.withColumn("sales", df["sales"].cast(IntegerType()))

df1 = df\
    .withColumn("buy_rate", (F.col("sales") / F.col("users")))
display(df1)

Karthikeyan Rasipalay Durairaj · Answer 1 · 2021-11-23T20:01:03

просто небольшая хитрость .

from pyspark.sql.types import IntegerType
import pyspark.sql.functions as F
simpleData=((1, 2), (2, 6), (3, 6))
columns= ["sales","users"]
df = spark.createDataFrame(data = simpleData, schema = columns)
df = df.withColumn("users", df["users"].cast(IntegerType()))
df = df.withColumn("sales", df["sales"].cast(IntegerType()))

df1 = df\
    .withColumn("buy_rate", (F.col("sales") / F.col("users")))
display(df1)

Спасибо Карти, и очень хороший подход с назначением нового столбца в withColumn() это прекрасно сработало.

Ошибка типа: объект "Фрейм данных" не поддерживает назначение элементов при использовании разделения

Вопрос

Лучший ответ

На других языках

Эта страница на других языках

Популярное в этой категории

Популярные вопросы в этой категории