Question

我已经根据在线教程编写了一些网络抓取代码，但是我收到了错误消息。我的代码几乎完全匹配在线的内容，但似乎仍然出现错误。有人可以请帮助。根据错误类型，它似乎与文件名和路径有关。我已尝试过各种组合，但仍然出现错误。

复制了我的代码。

from urllib.request import urlopen as uReq
from bs4 import BeautifulSoup as soup

my_url = 'https://www.newegg.com/Video-Cards-Video-Devices/Category/ID-38?Tpk=graphics%20cards'

uClient = uReq(my_url)
page_html = uClient.read()
uClient.close()

page_soup = soup(page_html, "html.parser")

containers = page_soup.finaAll("div", {"class":"item-container"})

filename = "C:\\Users\\_Alekhine_\\Python\\products.csv"
f = open(filename, "w")

headers = "brand, product_name, shipping\n"
f.write(" ")

for container in containers:
    brand = container.div.div.a.img["title"]

    title_container = container.findAll("a", {"class": "item-title"})
    product_name = title_container[0].text

    shipping_container = container.findAll("li", {"class": "price-ship"})
    shipping = shipping_container[0].text.strip()

    print("brand: " + brand)
    print("product_name: " + product_name)
    print("shipping: " + shipping)

    f.write(brand + "" + product_name.replace(",", "") + "" + shipping + "\n")

    f.close()

Answer 1

由于您没有发布错误，我可以从您的错误描述中假设您在第14行中指定的路径不存在。如果文件的路径不存在，即使在写入模式下，open也会失败。首先尝试创建目录C:\Users\_Alekhine_\Python。

您可以在Python（3.2 +）中执行此操作：

import os
os.makedirs(path, exist_ok=True)

顺便说一下，你的代码示例中也有一个拼写错误（第12行应该是findAll而不是finaAll），但我认为这不是你所描述的错误。

使用Beautiful Soup的Python Web抓取程序出错

1 个答案: