如何使用boost :: iostreams将bash脚本转换为C ++

时间:2011-02-21 22:34:15

标签: c++ bash boost boost-regex boost-iostreams

我正在尝试使用boost :: iostreams将以下bash代码转换为C ++:

#!/usr/bin/bash
(
    gzip -cd file1.ext.gz
    cat file2.ext
) | grep '^regex' # or sed 's/search/replace/'

我可以打开一个文件解压缩它:

std::ifstream s("file.ext.gz", std::ios_base::in | std::ios_base::binary);
boost::iostreams::filtering_istreambuf in;
in.push(boost::iostreams::gzip_decompressor());
in.push(s);

然后打开一个未压缩的文件:

std::ifstream s2("file.ext", std::ios_base::in | std::ios_base::binary);

现在我有点卡住,所以这是我的问题:

1)什么是boost :: iostreams解决方案来连接两个流?

2)如何通过正则表达式过滤器输出结果来模拟grep / sed?

结果我想要一个可以复制到cout的istream:

boost::iostream::copy(result, std::cout);

更新使用Hamigaki's concatenate完成解决方案:

/*
 * convert the following bash script into C++
 *
 * #!/bin/bash
 * (
 *     gzip -cd file1.ext.gz
 *     cat file2.ext
 * ) | grep '^filter' | 'sed s/search/replace/g'
 *
 */

#include <iostream>
#include <boost/bind.hpp>
#include <boost/iostreams/filtering_streambuf.hpp>
#include <boost/iostreams/device/file.hpp>
#include <boost/iostreams/filter/gzip.hpp>
#include <boost/iostreams/filter/regex.hpp>
#include <boost/iostreams/filter/grep.hpp>
#include <boost/iostreams/copy.hpp>

// http://hamigaki.sourceforge.jp/hamigaki/iostreams/concatenate.hpp
#include "concatenate.hpp"

namespace io = boost::iostreams;

int main(int argc, char const* argv[])
{
    io::file_source file1("file1.ext.gz");
    io::file_source file2("file2.ext");
    io::gzip_decompressor gzip;
    io::regex_filter sed(boost::regex("search"), "replace");
    io::grep_filter grep(boost::regex("^filter"));

    io::filtering_istreambuf in1(gzip | file1);
    io::filtering_istreambuf in2(file2);

    io::filtering_istreambuf combined(sed | grep | 
            hamigaki::iostreams::concatenate(
                boost::ref(in1),
                boost::ref(in2)
            )
        );

    io::copy(combined, std::cout);

    return 0;
}

2 个答案:

答案 0 :(得分:3)

1)我不知道是否内置了boost,但这个类似乎正是你想要的:http://hamigaki.sourceforge.jp/hamigaki/iostreams/concatenate.hpp

这里的问题是它希望CopyConstructible设备能够连接,而Chains似乎不是CopyConstructible。但是,我们可以使用boost :: ref轻松解决这个问题。这段代码(差不多)完全符合我的理解:

int main(int argc, char const* argv[])
{
  boost::iostreams::filtering_istreambuf in;
  boost::regex regex("search");
  boost::iostreams::regex_filter rf(regex, "replace");
  in.push(rf);

  boost::iostreams::file_source file1(argv[1]);
  in.push(file1);

  boost::iostreams::file_source file2(argv[2]);
  boost::iostreams::copy(hamigaki::iostreams::concatenate(boost::ref(in), file2), std::cout);

  return 0;
}

我只是使用正则表达式过滤器代替gzip进行测试。

2)boost :: iostreams有一个正则表达式过滤器:http://www.boost.org/doc/libs/1_45_0/libs/iostreams/doc/classes/regex_filter.html

编辑:你现在似乎已经开始工作了。

答案 1 :(得分:0)

1)在提升

中不可用

Hamigakis's concatenate听起来很有趣,但我无法弄清楚如何使用它来组合两个boost::iostreams::chain。代码提到它意味着“连接设备”,因此它可能不适用于链。如果我错了,请纠正我。

编辑:使用完整的解决方案更新了我的问题。

2a)grep行为(过滤器):

#include <boost/iostreams/filtering_streambuf.hpp>
#include <boost/iostreams/filter/grep.hpp>

boost::iostreams::filtering_istreambuf in;
boost::regex regex("^search")
boost::iostreams::grep_filter grep(regex);
in.push(grep);

2b)sed行为(搜索/替换):

#include <boost/iostreams/filtering_streambuf.hpp>
#include <boost/iostreams/filter/regex.hpp>

struct formatter {
    std::string operator()(const boost::match_results<const char*>& match)
    {
        return str(boost::format("%s | %s") % match[2] % match[1]);
    }
};
boost::iostreams::filtering_istreambuf in;
boost::regex regex("^([a-z]+) ([0-9]+)");
boost::iostreams::regex_filter sed(regex, formatter());
in.push(sed);