有没有办法使用pd.to_feather附加到.feather格式文件?
我也很好奇是否有人知道最大文件大小方面的一些限制,以及在读取.feather文件时是否可以查询某些特定数据(例如读取行,其中日期>&# 39; 2017年3月31日&#39)
。我喜欢能够存储数据帧和分类数据的想法。
答案 0 :(得分:1)
不幸的是,羽毛和镶木地板都是面向柱状的文件。这意味着您无法“追加”,因为这只能在面向行的文件格式中进行。如果要使用镶木地板或羽毛装饰,可以考虑使用其他方法对文件进行分区。例如,如果您的数据每天都生成一次,并且没有变化,则可以根据日期进行写入和分区。读写文件时确实会产生一些开销,但比每次重新写入整个文件更好。
由于它是列格式,因此您也无法查询,而只能在例如日期> 2017年1月1日,镶木地板的优势在于您只能够读入分析所需的列。