Skip to main content
 首页 » 编程设计

python之pyqt4:循环主渲染类

2025年05月04日16softidea

我有一个 PyQt4 类,用于下载我用于报废目的的网页。

当我在实例化时将 url 列表传递给 Render 类时它工作正常(单次调用)但是当我尝试使用多个 url 列表循环 [r = Render(url, cb=scrape)] 时,之后第一个循环,执行停止或挂起,没有抛出任何错误。

我想单独循环这个类,因为 urls 列表属于不同的类别,并且必须单独存储提取的内容。

我也知道只能启动一个应用,如果是这样的话如何不退出应用就退出。这样新的 url 列表可以被同一个应用程序使用

我被这个问题困扰了一段时间。提前致谢

import sys 
from PyQt4.QtCore import * 
from PyQt4.QtGui import * 
from PyQt4.QtWebKit import * 
 
class Render(QWebPage):   
  def __init__(self, urls, cb): 
    self.app = QApplication(sys.argv)   
    QWebPage.__init__(self)   
    self.loadFinished.connect(self._loadFinished)   
    self.urls = urls   
    self.cb = cb 
    self.crawl()   
    self.app.exec_()   
 
  def crawl(self):   
    if self.urls:   
      url = self.urls.pop(0)   
      print 'Downloading', url   
      self.mainFrame().load(QUrl(url))   
    else:   
      self.app.quit()   
 
  def _loadFinished(self, result):   
    frame = self.mainFrame()   
    url = str(frame.url().toString())   
    html = frame.toHtml()   
    self.cb(url, html) 
    self.crawl()   
 
def scrape(url, html): 
    pass # have scraping code here 
 
url1 = ['http://webscraping.com', 'http://webscraping.com/blog']  
url2 = ['http://webscraping.com', 'http://webscraping.com/blog'] 
urls =[] 
urls.append(url1) 
urls.append(url2) 
 
for url in urls: 
    r = Render(url, cb=scrape) 

请您参考如下方法:

问题是您只能实例化一个 QApplication 对象。这是一个避免这种情况的更新版本,然后仅在下载 URL 时运行 Qt 的执行循环:

import sys 
from PyQt4.QtGui import QApplication 
from PyQt4.QtCore import QUrl 
from PyQt4.QtWebKit import QWebPage 
 
class Render(QWebPage): 
  def __init__(self, cb): 
    self.app = QApplication(sys.argv) 
    QWebPage.__init__(self) 
    self.loadFinished.connect(self._loadFinished) 
    self.cb = cb 
 
  def crawl(self, url): 
    print 'Downloading', url 
    self.mainFrame().load(QUrl(url)) 
    self.app.exec_() 
 
  def _loadFinished(self, result): 
    frame = self.mainFrame() 
    url = str(frame.url().toString()) 
    html = frame.toHtml() 
    self.cb(url, html) 
    self.app.quit() 
 
 
def scrape(url, html): 
  pass # add scraping code here 
  print len(html) 
 
 
r = Render(cb=scrape) 
urls = ['http://webscraping.com', 'http://webscraping.com/blog'] 
for url in urls: 
    r.crawl(url)