如何使用ff包加载一个大的csv?

时间:2013-12-12 09:08:48

标签: linux r bigdata ff

我是R.的新人 我有一个2.5 gb左右的大csv,有3列和4000万行。列的数据类型是interger,datetime和char。如何使用ff包加载此csv?

1 个答案:

答案 0 :(得分:0)

它会给你一些想法并使用现有的链接Save and load your bigDataload big csv file

all <- read.csv("file.csv")
    library("ff")
    help(read.table.ffdf)
    x<- read.csv.ffdf(file="file.csv", header=TRUE, VERBOSE=TRUE, first.rows=10000, next.rows=50000, colClasses=NA)
    save.ffdf(ffdfname, dir=”/PATH/TO/STORE/FF/FILES”)
    load.ffdf(dir=”/PATH/TO/STORE/FF/FILES”)
希望它会对你有所帮助。