Skip to main content
 首页 » 编程设计

Python xpath : try an xpath, 除了填写给定的值

2025年02月15日6TianFang

我正在从网站上抓取评论。最终我需要几个列表(例如用户名和日期),它们将在每次审查时放入一个字典中,这样它看起来像这样:

reviews:[{'username':'Harry','date':'april'}, 
         {'username':'Rob','date':'may'}] 

这些列表必须同样长,因为我将它们放在这样的字典中: 评论=[]

for i in range(len(username)): 
    reviews.append({'username':username[i].strip(), 
                              'date':date[i].strip()}) 

但是,当没有用户名时,xpath 不会返回任何内容并且我的列表太短(这将给出错误“列表索引超出范围”)。当 xpath 不起作用时,如何填写给定值(例如“无名称”)?如果尝试过这样的事情(我认为会起作用但不起作用):

try: 
    names = tree.xpath.. 
except: 
    "no name" 

编辑:HTML 评论类型的示例(移动与非移动)。 手机评论:

<div class="rating reviewItemInline"> 
  <span class="ui_bubble_rating bubble_50"></span> 
  <span class="ratingDate relativeDate">Reviewed 6 days ago</span> 
  <a class="viaMobile">via mobile</a> 
</div> 

非移动评论:

<div class="rating reviewItemInline"> 
  <span class="ui_bubble_rating bubble_50"></span> 
  <span class="ratingDate relativeDate">Reviewed 6 days ago</span> 
</div> 

请您参考如下方法:

不需要实现try/except,只需尝试获取所有必需元素的两个列表,如下所示:

html = lxml.html.fromstring("source code here") 
reviews = html.xpath('//div[@class="rating reviewItemInline"]') 
dates = [i.xpath('./span[@class="ratingDate relativeDate"]')[0].text for i in reviews] 
mobile = [i.xpath('./a')[0].text if i.xpath('./a') else "no" for i in reviews] 
output = [{'date': i, 'via mobile': j} for i, j in zip(dates, mobile)] 

输出应该是这样的

[{'date': 'Reviewed 6 days ago', 'via mobile': 'via mobile'}, {'date': 'Reviewed 6 days ago', 'via mobile': 'no'}]