我试图让 BeautifulSoup 查找所有五个类为“blog-box”的 div,然后在每个 div 中查找并找到类为“date”和类“right-box”的 div然后打印那些。我需要它来打印日期,然后立即打印相关文本,这就是为什么我不能直接查找“日期”和“右框”div 的原因。
for i in xrange(3, 1, -1):
page = urllib2.urlopen("http://web.archive.org/web/20090204221349/http://www.americansforprosperity.org/nationalblog?page={}".format(i))
soup = BeautifulSoup(page.read())
snippet = soup.find_all('div', attrs={'class': 'blog-box'})
print snippet
for div in snippet:
date = soup.find('div', attrs={'class': 'date'})
text = soup.find('div', attrs={'class': 'right-box'})
print date.text
print text.text
但我运行了它,它打印了第一个日期和文本 div 五次,然后停止了。
请您参考如下方法:
您似乎不小心在内循环中使用了soup,而不是循环变量div。尝试:
for ...:
...
for div in snippet:
date = div.find('div', attrs={'class': 'date'}) # <-- changed here
text = div.find('div', attrs={'class': 'right-box'}) # <--changed here
print date.text
print text.text
