尝试将数据帧保存为redshift时出现UnsupportedOperationException

Question

我正在使用pyspark并将数据帧保存为redshift。我在尝试将其保存到

时遇到以下错误

": java.lang.UnsupportedOperationException: Unexpected type NullType.
        at com.databricks.spark.avro.SchemaConverters$.com$databricks$spark$avro$SchemaConverters$$convertFieldTypeToAvro(SchemaConverters.scala:283)
"

当我查看ScehmaCovnerters的源代码时： https://github.com/databricks/spark-avro/blob/master/src/main/scala/com/databricks/spark/avro/SchemaConverters.scala

我看不到对NullType的支持。我在dataframe中有列为null。

这是什么解决方案？