Selenium Firefox webdriver适用于从Ubuntu构建的图像,但不适用于使用Debian构建的图像

时间:2018-02-27 21:49:16

标签: python selenium docker debian iceweasel

这是我遇到的一个非常奇怪的情况。我有以下简单的Python脚本:

from selenium import webdriver
from selenium.webdriver.firefox.options import Options


options = Options()
options.add_argument("-headless")
browser = webdriver.Firefox(firefox_options=options)
browser.get("https://www.google.com")
print(browser.current_url)

脚本的包装器:

#!/bin/bash

wget https://github.com/mozilla/geckodriver/releases/download/v0.19.1/geckodriver-v0.19.1-linux64.tar.gz
tar -xzvf geckodriver-v0.19.1-linux64.tar.gz
chmod 777 geckodriver
mv geckodriver /usr/bin/
firefox -v
# python3 when ubuntu
python test.py 

另外我有两个Dockerfiles:

Dockerfile A(Ubuntu;工作正常):

FROM ubuntu:16.04
RUN apt-get update -y && apt-get install -y python3 \
        python3-pip \
        firefox \
        build-essential \
        wget
COPY . /app
WORKDIR /app
RUN pip3 install --upgrade pip
RUN pip3 install -r requirements.txt
ENTRYPOINT ["bash"]
CMD ["test_wrapper.sh"]

Dockerfile B(Debian;崩溃):

FROM continuumio/anaconda3:5.0.1
RUN apt-get update -y && apt-get install -y iceweasel \
        build-essential \
        wget
COPY . /app
WORKDIR /app
RUN pip install --upgrade pip
RUN pip install -r requirements.txt
ENTRYPOINT ["bash"]
CMD ["test_wrapper.sh"]
从Dockerfile B构建的映像运行

test.py会引发以下异常:

selenium.common.exceptions.WebDriverException: Message: Process unexpectedly closed with status: 1

geckodriver.log显示以下错误:

GTK_BACKEND doesn't match available displays

是否有人遇到此问题并知道解决方法?它应该不需要访问显示器,因为它运行无头 - 除非selenium Firefox选项在iceweasel中与普通Firefox不同?我期待类似的行为,我更喜欢使用Anaconda图像

我刚试过this,我几乎可以肯定会解决它,但它没有用。

编辑:我不相信这是一个geckodriver问题,因为我尝试使用firefox-esr代替iceweasel的相同Dockerfile。另外,我尝试以交互方式启动容器并执行firefox -headless(在ubuntu上启动无头的firefox会话)它给出了与selenium完全相同的GTK错误。

2 个答案:

答案 0 :(得分:1)

RUN apt-get install -y --no-install-recommends apt-utils
RUN apt-get install -y wget \
        build-essential \
        libgl1-mesa-glx \
        libgtk-3-dev 
ARG FIREFOX_VERSION=58.0.2
RUN wget --no-verbose -O /tmp/firefox.tar.bz2 https://download-installer.cdn.mozilla.net/pub/firefox/releases/$FIREFOX_VERSION/linux-x86_64/en-US/firefox-$FIREFOX_VERSION.tar.bz2 \
   && rm -rf /opt/firefox \
   && tar -C /opt -xjf /tmp/firefox.tar.bz2 \
   && rm /tmp/firefox.tar.bz2 \
   && mv /opt/firefox /opt/firefox-$FIREFOX_VERSION \
   && ln -fs /opt/firefox-$FIREFOX_VERSION/firefox /usr/bin/firefox
ARG GK_VERSION=v0.19.1
RUN wget --no-verbose -O /tmp/geckodriver.tar.gz http://github.com/mozilla/geckodriver/releases/download/$GK_VERSION/geckodriver-$GK_VERSION-linux64.tar.gz \
   && rm -rf /opt/geckodriver \
   && tar -C /opt -zxf /tmp/geckodriver.tar.gz \
   && rm /tmp/geckodriver.tar.gz \
   && mv /opt/geckodriver /opt/geckodriver-$GK_VERSION \
   && chmod 755 /opt/geckodriver-$GK_VERSION \
   && ln -fs /opt/geckodriver-$GK_VERSION /usr/bin/geckodriver

根据@Florent B.链接的内容进行以下更改是对它的修复。基本上firefox-esr是版本52,Firefox的-headless选项在版本55中发布。我不确定iceweasel的版本是什么,但可能早于它。如果没有libgtk-3,高于52的Firefox版本将无法运行。我认为Debian 8仍然有libgtk-2因此也需要安装它。无头浏览在Debian 8上与build-essentiallibgtk-3-devwgetlibgl1-mesa-glx完美配合。

答案 1 :(得分:0)

您永远不应该使用包管理器安装Firefox。你可以在下面的链接

找到所有的firefox版本

https://download-installer.cdn.mozilla.net/pub/firefox/releases/

如果你看一下Selenium Firefox Dockerfile

https://github.com/SeleniumHQ/docker-selenium/blob/master/NodeFirefox/Dockerfile

他们使用

下载所需的版本
wget --no-verbose -O /tmp/firefox.tar.bz2 $FIREFOX_DOWNLOAD_URL

对于依赖项问题,他们运行以下命令

apt-get -qqy --no-install-recommends install firefox

然后删除firefox

apt-get -y purge firefox

这确保您不必担心所有必需的依赖项。如果你想要,你仍然可以获得依赖

$ apt-cache depends firefox | grep Depends
  Depends: lsb-release
  Depends: libatk1.0-0
  Depends: libc6
  Depends: libcairo-gobject2
  Depends: libcairo2
  Depends: libdbus-1-3
  Depends: libdbus-glib-1-2
  Depends: libfontconfig1
  Depends: libfreetype6
  Depends: libgcc1
  Depends: libgdk-pixbuf2.0-0
  Depends: libglib2.0-0
  Depends: libgtk-3-0
  Depends: libpango-1.0-0
  Depends: libpangocairo-1.0-0
  Depends: libstartup-notification0
  Depends: libstdc++6
  Depends: libx11-6
  Depends: libx11-xcb1
  Depends: libxcb-shm0
  Depends: libxcb1
  Depends: libxcomposite1
  Depends: libxdamage1
  Depends: libxext6
  Depends: libxfixes3
  Depends: libxrender1
  Depends: libxt6

如果你看下面的链接

https://developer.mozilla.org/en-US/Firefox/Headless_mode

  

浏览器支持

     

Headless Firefox适用于Linux上的Fx55 +,以及Windows / Mac上的56+。