Pyspark读取包含CSV的7z压缩文件

时间:2018-12-18 17:26:56

标签: apache-spark pyspark

如何在Pyspark中读取7z压缩文件?

我尝试创建如下数据框:

df = spark.read.csv("s3a://test-bucket/dev/test.7z", sep='|')

df.show()显示如下数据-

+--------------------+
|                 _c0|
+--------------------+
|        7z��'��Ȥ�|
|$��...|
|Ӹ�<�Y[�0�O���!g���|
| jMi�,�K\T�@�ّ���...|
|o\�*l��vg'BS�s�...|
|I�N�t  ���Ni��?ޣ�...|
|V�!�?g`�]�%ޚ�i�V...|
|�����p �Bj*���mv...|
|              �>d�UH|
|�,i��e�k�z�)�Pj...|
|�����Mn���Eo�,...|
|�ux D���)6��^6�j...|
|�쥲���o�}�~S#N��...|
|6*�(au���9��Lq'2�...|
|]�R��J!6 a�m�c�i...|
|�H�_Ae1�P��} JZ��...|
|�z~O�@SG   �̬H��@...|
|+V`(/���D��Z� ...|
|ز����[�6�z��<:��...|
|                 NH�|
+--------------------+

是否支持7z?有什么方法可以读取7z吗?

0 个答案:

没有答案