Browsermob代理+ Watir无法连续捕获流量

时间:2018-12-06 04:02:52

标签: ruby selenium watir browsermob-proxy har

我已使用Watir正确设置BrowserMob代理,它正在捕获流量并保存HAR文件;但是,它没有做的是没有连续捕获流量。因此,以下是我要实现的目标:

  1. 转到主页
  2. 点击链接进入另一个页面,我需要等待一些事件的发生
  3. 从第二页开始,在事件发生后开始捕获流量,并等待特定的呼叫发生并捕获其内容。

不过,我要注意的是,它正在执行上述所有步骤,但是在第3步,代理甚至在该页面上进行该调用之前就停止捕获流量。返回的HAR中没有该调用,因此测试在完成工作之前就失败了。以下是代码的样子。

components.module.ts

在我的测试文件中,我关注了

class BMP
attr_accessor :server, :proxy, :net_har, :sel_proxy

 def initialize
    bm_path = File.path(Support::Paths.cucumber_root + "/browsermob- 
    proxy-2.1.4/bin/browsermob-proxy")
    @server = BrowserMob::Proxy::Server.new(bm_path, {:port => 9999, 
       :log => false, :use_little_proxy => true, :timeout => 100})
    @server.start
    @proxy = @server.create_proxy
    @sel_proxy = @proxy.selenium_proxy

    @proxy.timeouts(:read => 50000, :request => 50000, :dns_cache => 
      50000)

    @net_har = @proxy.new_har("new_har", :capture_binary_content => 
      true, :capture_headers => true, :capture_content => true)
end

def fetch_har_entries(target_url)

  har_logs = File.join(Support::Paths.har_logs, "har_file # . 
  {Time.now.strftime("%m%d%y_%H%M%S")} .har")
  @net_har.save_to har_logs

  index = 0
  while (@net_har.entries.count > index) do

    if @net_har.entries[index].request.url.include?(target_url) && 
    entry.request.method.eql?("GET")
      logs = JSON.parse(entry.response.content.text) if not 
          entry.response.content.text.nil?
      har_logs = File.join(Support::Paths.har_logs, "json_file_# . 
          {Time.now.strftime("%m%d%y_%H%M%S")}.json")
      File.open(har_logs, "w") do |json|
         json.write(logs)
      end
      break
    end 
  index += 1
  end
 end
end

我缺少什么导致代理无法完全捕获流量?

1 个答案:

答案 0 :(得分:0)

万一有人从谷歌搜索中来到这里,我想出了自己解决这个问题的方法(感谢stackoverflow社区,什么都没有,哈哈)。因此,为解决此问题,我使用了一个名为retriable loop的自定义eventually方法。

 logs = nil
eventually(timeout: 110, interval: 1) do
  @net_har = @proxy.new_har("har", capture_binary_content: true, capture_headers: true, capture_content: true)
  @net_har.entries.each do |entry|
    begin
      break if @net_har.entries.index entry == @net_har.entries.count
      next unless entry.request.url.include?(target_url) &&
                  entry.request.post_data.text.include?(target_body_text)

      logs = entry.request.post_data.text
      break
    rescue TypeError
      fail("Response body for the network call came back empty")
    end
  end
  raise EOFError if logs_hash.nil?
end
logs
end

基本上,我假设发生的事情是BMP仅缓存或捕获了价值30秒的har日志,如果在这30秒内没有发生网络事件,那我就是SOL。因此,上面的代码正在做的是等待logs变量不为nil,如果是,它将引发一个EOFError并返回循环,再次初始化har并再次寻找网络呼叫。它会继续这样做,直到找到呼叫或110秒为止。以下是我正在使用的eventually方法

def eventually(options = {})
  timeout = options[:timeout] || 30
  interval = options[:interval] || 0.1
  time_limit = Time.now + timeout
  loop do
    begin
     yield 
    rescue EOFError => error
  end
  return if error.nil?
  raise error if Time.now >= time_limit

  sleep interval
 end
end