Skip to main content
 首页 » 编程设计

python之在 Scrapy 中对同一个 ArticleItem 使用多个 CSS 选择器

2024年10月25日10TianFang

我正在抓取的网站布局不一致。我目前正在使用它,但它没有返回所有标题 -

article['title'] = sel.css('p[class=title] ::text').extract() 

我还需要用它来抓取跨度类 -

article['title'] = sel.css('span[class=newstitle] ::text').extract() 

有没有办法在单个 ArticleItem 中组合两个 css 选择器?

请您参考如下方法:

就像列表连接一样简单:

article['title'] = response.css("p.title ::text").extract() + \ 
                   response.css("span.newstitle ::text").extract()