显示超过10亿行数据的图表

Question

我有一个包含超过10亿行的40G数据文件。

每行包含2列，用逗号分隔，两列都是'float'类型，第一列增加每行。

我想在一个文件中显示这些数据，我已经尝试了Excel，但它说的行太多而无法全部显示。

是否还有其他工具可以处理大数据并显示数据的折线图？

Answer 1

Excel不适合此大小的文件。没有完美的规则，但如果超过200,000行，我通常会将数据移动到关系数据库中。在SQL中，您可以执行逻辑来创建较小的数据集，该数据集将数据聚合为更易于管理的大小。

如果你无法获得超值的大小，那么你需要研究像Tableau这样可以在关系数据库中绘制数据图形的选项。