从数据库中的推文中删除停用词和超链接

时间:2014-02-28 11:02:01

标签: java mysql nltk twitter4j

我想从存储在MySQL数据库中的推文中删除所有超链接和停用词。也是以http://开头的超链接。

1 个答案:

答案 0 :(得分:2)

我们可以使用正则表达式在java中完成这些任务

删除StopWords

String.replaceAll(STOPWORD,"")

删除超链接

String.replaceAll("http[^\\s]+","")

删除不以http

开头的URl
String.replaceAll("www[^\\s]+","")