将第一行csv作为scala中表的标题

时间:2017-09-25 20:24:04

标签: scala apache-spark

A^B^C^D^E^F
1^b^3^z^m^6
7^w^9^55^0^D
k^^f^^

我们如何删除文件的第一行并将其作为标题&提供架构,我们没有提供任何架构/ DDL来创建表。 应该没有Databricks包。它是数据集的概述,实际列数约为100-150。 在spark中读取脚本后需要自动化脚本。

最终输出:

**A**   **B**   **C**   **D**   **E**   **F**
  1       b       3       z       m       6
  7       w       9       55      0       D
  k               f         

0 个答案:

没有答案