我正在抓取的网站布局不一致。我目前正在使用它,但它没有返回所有标题 -
article['title'] = sel.css('p[class=title] ::text').extract()
我还需要用它来抓取跨度类 -
article['title'] = sel.css('span[class=newstitle] ::text').extract()
有没有办法在单个 ArticleItem 中组合两个 css 选择器?
请您参考如下方法:
就像列表连接一样简单:
article['title'] = response.css("p.title ::text").extract() + \
response.css("span.newstitle ::text").extract()
