关于这个由Bucky roberts在python中编写webcrawler的视频：
https://www.youtube.com/watch?v=sVNJOiTBi_8
这是我的问题：
如果我想抓取某个特定的项目，但它不在＆lt;一个＆GT; ＆LT; / A＆GT;
我该怎么办？
代表。我检查了网站，发现这是我想要的信息的代码（我希望href和标题就像在Bucky的视频中一样）：
< td headers="categorylist_header_title" class="list-title" > < a href="BLABLABLABLA.HTML" > blablabliblableblu < /a> < /td>
按照说明我注意到元素＆＃34; class =＆＃34; list-title＆＃34;里面是我需要抓取的那个，但当我在soup.findAll('a',{'class': 'list-title'}):中使用链接时它不起作用，我认为因为它不在＆lt; a＆gt;，如果我们内部没有特定的信息并且我们正在查找的元素在这种情况下是不是可以抓取那些信息？
希望我解释自己我刚刚开始编程本周，如果你知道我在哪里可以读到这个，请给我一个来源，所以我不再问愚蠢的问题。
以下是此工具的源代码，目前只有获取所有链接，如果有人想尝试一下：
import requests
from bs4 import BeautifulSoup
def trade_spider(max_pages):
page = 1
while page <= max_pages:
url = 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas'
source_code = requests.get(url)
plain_text = source_code.text
soup = BeautifulSoup(plain_text, "html.parser")
for link in soup.findAll('a'):
href = 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas'+ link.get('href')
print(href)
trade_spider(1)
答案 0 :(得分：1)
td具有类list-title，而不是锚标记。
您只需要在表格行中选择带有list-title类的 td 标记，然后从每个td内的锚点中提取href：
from bs4 import BeautifulSoup
import requests
from urlparse import urljoin
soup = BeautifulSoup(requests.get("http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas").content)
base = 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas'
print( [urljoin(base,td.a["href"]) for td in soup.find_all("td", {"class":"list-title"})])
哪会给你：
['http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/11899-hemeroteca-y-biblioteca-libertarias-3-1.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/11809-distribuidora-anarquista-polaris-nueva-edicion-negros-presagios-politica-anarquista-en-la-era-del-colapso-de-uri-gordon.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/11789-libro-la-crisis-del-socialismo-jose-garcia-pradas.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/11618-libro-nuestro-planeta-de-elisee-reclus.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/11602-hemeroteca-y-biblioteca-libertarias-2-0.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/11493-descarga-la-lucha-contra-el-estado-la-bestia-de-la-propiedad-y-el-origen-del-capital-moderno-en-pie-de-guerra-contra-la-civilizacion.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/11461-descarga-libros-contra-los-pastores-contra-los-rebanos-una-declaracion-de-guerra.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/11396-libro-un-dragon-en-el-reino-de-orb-de-federico-zenoni-cuento-ilustrado-para-descargar.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/11283-paginas-de-lucha-cotidiana-libro-de-errico-malatesta-para-descarga.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/11204-descargar-actualizaciones-ex-nihilo.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/11192-libro-al-diablo-con-la-cultura-herbert-read.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/10966-libro-bakunin-escritos-de-filosofia-politica-tomo-ii-partes-iii-y-iv.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/10842-libro-palabras-de-un-rebelde-piotr-kropotkin.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/10512-libro-la-voluntad-del-pueblo-democracia-y-anarquia-eduardo-colombo.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/10485-libro-paginas-de-lucha-cotidiana-primera-parte-temas-del-comunismo-anarquico-errico-malatesta.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/10474-los-tiempos-nuevos-piotr-kropotkin.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/10416-libro-el-humanisferio-utopia-anarquica-joseph-dejacque.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/10366-libro-primero-de-mayo-lectura-para-el-dia-de-las-trabajadoras-y-trabajadores.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/10339-libro-el-espacio-politico-de-la-anarquia-esbozos-para-una-filosofia-politica-del-anarquismo.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/10314-libro-las-politicas-de-la-ecologia-social-municipalismo-libertario-janet-biehl-y-murray-bookchin.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/10239-libro-el-principio-federativo-pierre-joseph-proudhon.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/10187-libro-malatesta-pensamiento-y-accion-revolucionarios.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/10112-50-titulos-para-una-biblioteca-basica-del-anarquismo-latinoamericano.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/10102-libro-la-libertad-entre-la-historia-y-la-utopia-luce-fabbri.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/10028-libro-de-poesia-jardin-de-acracia.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/10008-libro-anarquismo-trashumante.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9984-libro-fuera-politica-anselmo-lorenzo.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9969-libro-cartas-y-textos-de-librado-rivera.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9920-libro-la-anarquia-manuel-gonzalez-prada.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9853-libro-tacticas-revolucionarias-mijail-bakunin.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9847-libro-discursos-de-ricardo-flores-magon.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9799-libro-anselmo-lorenzo-un-militante-proletario-en-el-ojo-del-huracan.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9789-libro-el-mundo-nuevo-louise-michel.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9751-libro-ideario-ricardo-mella.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9700-libro-problemas-del-sindicalismo-y-del-anarquismo-joan-peiro.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9679-libro-hacia-la-emancipacion-tactica-de-avance-obrero-en-la-lucha-por-el-ideal-anselmo-lorenzo.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9664-libro-forjando-un-mundo-libre-ricardo-mella.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9633-libro-via-libre-el-trabajador-su-ideal-emancipador-desviaciones-politicas-y-economicas-anselmo-lorenzo.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9625-folleto-el-anarquismo-en-el-movimiento-obrero-errico-malatesta.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9547-libro-en-anarquia-novela-camille-pert.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9495-libro-la-anarquia-triunfante-anselmo-lorenzo.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9472-folleto-el-trabajo-los-trabajadores-y-el-anarquismo.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9454-libro-teresa-claramunt-la-virgen-roja-barcelonesa-biografia-y-escritos.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9416-libro-la-anarquia-a-traves-de-los-tiempos-max-nettlau.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9398-libro-seamos-rebeldes-folletos-y-otros-escritos-teodoro-antilli.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9375-libro-utopias-antiguas-y-modernas-angel-j-cappelletti.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9365-libro-del-amor-modo-de-accion-y-finalidad-social-ricardo-mella.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9358-libro-contra-la-ignorancia-anselmo-lorenzo.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9316-libro-consideraciones-filosoficas-sobre-el-fantasma-divino-sobre-el-mundo-real-y-sobre-el-hombre-mijail-bakunin.html', 'http://www.portaloaca.com/pensamiento-libertario/libros-anarquistas/9270-libro-el-lenguaje-libertario-christian-ferrer.html']