格式化组织和过滤文本文件中的数据

时间:2010-11-10 21:32:13

标签: parsing filter scripting text-files

我希望在一堆文件夹中浏览一堆文本文件。我想逐行浏览每个文件并做一些基本的统计,比如抓住时间戳和计算重复值。是否有人可以推荐这样做的工具或脚本解决方案?

另一种可能性是拥有一个脚本/工具,可以解析这些文件并将它们添加到数据库,如sqlite或access,以便于过滤。

到目前为止,我尝试使用AIR,但看起来可能有太多数据需要处理,而且它会挂起,但这可能是因为某些效率低下的过滤。

2 个答案:

答案 0 :(得分:1)

我推荐Perl和CPAN

答案 1 :(得分:1)

我已经将QuickMacros用于这样的事情。它可以对文本文件(在7种状态下有些非法)以及连接数据库和执行sql任务(如创建和修改表等)做任何事情。

我经常使用它来提取数据,解析数据,然后将其加载到另一个数据库中。特别适用于计划任务。

Here's the website