拆分文本文件以在R

时间:2016-12-14 10:24:07

标签: r

我有一篇包含100篇文章的文本文件。每篇文章的结尾都是文档,后跟空格,然后是字母数字。字母数字长度为25个字符。

四篇文章如何结束的例子。字母数字没有固定模式。

  • 文件AFNR000020161206ecc700006
  • 文件TEKMET0020161202ecc200008
  • 文件AFNR000020161130ecc10001o
  • 文件AFNR000020161127ecbs00018

我的代码用于读取R中的文本文件和拆分文本文件

textfile <- "Text.txt"
TextData <-readLines(textfile)
head(TextData)
length(TextData)

 nchar(TextData)
 TextData = strsplit(TextData, "<Document>" "[a-zA-Z0-9]")

我很难使用 strsplit 文字字母数字之间创建拆分。

一旦我分裂,我就可以创建一个语料库:

library(tm)
doc.vec <- VectorSource(TextData)
corpusDoc <- Corpus(doc.vec)
summary(corpusDoc)

谢谢

1 个答案:

答案 0 :(得分:0)

您的数据看起来并不完全清楚,但假设它只是一个长字符串和&#34;文档字母数字代码&#34;与文本的其余部分一致,以下内容应该有效:

# mock data
TextData <- "Lorem ipsum dolor sit amet, consectetur adipiscing elit. Nullam egestas sapien eu leo rutrum, non commodo metus auctor. Quisque id libero quis augue bibendum auctor sed vel odio. Aliquam quam odio, maximus vitae elit at, pharetra volutpat nulla. Nam iaculis mattis lectus, sit amet euismod neque ornare consectetur. Cras nec nibh sit amet massa laoreet tempor sit amet in sem. Sed pulvinar sapien risus, molestie cursus augue rhoncus sed. Donec ullamcorper tellus vel tortor finibus pretium. Sed non tristique nisi. Document AFNR000020161206ecc700006 Vestibulum quis risus pulvinar elit blandit faucibus sed et massa. Phasellus non arcu vulputate, aliquam felis sit amet, pellentesque lorem. Praesent ut felis pellentesque, tincidunt risus imperdiet, vehicula ante. Donec odio sapien, vulputate sed semper at, pharetra sit amet dui. Fusce aliquam ullamcorper nunc in ullamcorper. Suspendisse vitae ex aliquam turpis vestibulum semper at ut quam. Interdum et malesuada fames ac ante ipsum primis in faucibus. Nam varius, risus sed feugiat mollis, nunc urna hendrerit mi, eu cursus erat mi quis ligula. Maecenas sit amet sagittis tellus. Donec ultricies faucibus ipsum id mattis. Ut lacinia, diam nec dignissim vestibulum, nibh augue tincidunt dolor, eu dictum felis augue in elit. Sed et scelerisque felis. Document TEKMET0020161202ecc200008 Aenean ut erat mattis, convallis orci eget, tincidunt massa. Integer dictum in erat et ornare. Donec et cursus eros. Aenean condimentum erat in lacus dictum, ac convallis tortor venenatis. Donec luctus dapibus aliquam. Maecenas et ipsum ac lacus convallis luctus. Phasellus volutpat risus sit amet volutpat vestibulum. Vestibulum eu elit sed massa imperdiet congue id interdum odio. Document AFNR000020161130ecc10001o Proin et accumsan nisi. Suspendisse tempus accumsan mollis. Integer aliquam fermentum consequat. Nunc sit amet suscipit tellus, in fringilla diam. Nulla rutrum elit nec blandit varius. Praesent vehicula nibh orci, nec facilisis sem vulputate non. Cras vel ipsum eleifend, vulputate ante congue, facilisis ligula. Integer ac mollis nibh. Ut vitae lacus eget mauris ultrices iaculis non eget diam. Praesent placerat lorem id ante maximus cursus. Ut quis lacus nec turpis tincidunt sagittis lacinia at tortor. Cras vitae posuere diam. Maecenas ut convallis lacus, in commodo neque. Sed rhoncus cursus arcu, nec pharetra odio lacinia quis. Sed nec neque libero. Etiam sit amet purus eros. Document AFNR000020161127ecbs0001"

# split on desired string
TextData <- strsplit(TextData, "Document [a-zA-Z0-9]{25}")

# if you want it as a vecotr
TextData <- unlist(TextData)

似乎问题在于您在strsplit函数中定义正则表达式的方式。