Pyspark：pysparkデータフレームからUTFヌル文字を削除します

ああ待って-私はそれを持っていると思います。私がこのようなことをすると、うまくいくようです：

null = u'\u0000'
new_df = df.withColumn('e', regexp_replace(df['e'], null, ''))

そして、すべての文字列列にマッピングします：

string_columns = ['d','e']
new_df = df.select(
  *(regexp_replace(col(c), null, '').alias(c) if c in string_columns else c for
    c in df.columns)
  )