Skip to main content
 首页 » 编程设计

Python(看门狗)——等待文件被正确创建

2024年11月01日8mfrbuaa

我是 Python 的新手,我正在尝试实现良好的“文件创建”检测。如果我不放置 time.sleep(x),我的文件将以错误的方式详细说明,因为它们仍在文件夹中“创建”。 (缓冲区不为空) 我如何在每次创建文件时不等待 x 秒的情况下规避这个问题?

这是我的代码:

主要内容:

while 1: 
    if len(parser()) > 0: #  arguments are valid 
        if len(parser()) == 3: 
            log_path = parser()['log_path'] 
        else: 
            log_path = os.getcwd() 
        paths = parser() 
        if paths: 
            handler = Event_Handler() 
            observer = Observer() 
            observer.schedule(handler, paths['src_fld'], True) 
            observer.start() 
            try: 
                    while True: 
                        time.sleep(1) 
            except KeyboardInterrupt: 
                observer.stop() 
            observer.join() 
    else: 
        exit(1) 

Event_Handler 类:

class Event_Handler(FileSystemEventHandler): 
    def on_created(self, event): 
        if not event.is_directory: 
            time.sleep(1) 

正如我所说,如果没有 time.sleep(1),如果我尝试处理一个大文件,我会失败,因为它还没有完全写入。

请您参考如下方法:

对于像我一样偶然发现这个问题的任何 future 读者,答案似乎是你不能。 Watchdog 不支持也不会支持任何功能来判断文件是否“完整”,因为 Windows 不允许这样做,并且 Watchdog 与系统无关。

如果您使用的是 Linux 或它的某些发行版,inotify 可能是一个安全的选择。否则,在 Windows 上,我发现的最佳解决方案是:

上传一个大文件bigfile,然后上传另一个文件bigfile-complete。当您找到一个文件名称-完整时,您返回并上传/传输/响应原始文件名称。在这种情况下,您的文件将全部添加到队列中的受监视目录中,队列依次为 file、file-complete、file2、 file2-完成,. . .

轮询文件的大小,直到它在一段合适的时间内保持固定。当它没有足够长的时间改变以至于你可以合理地确定它已经完成时,像往常一样对它使用react。

同样,当一个文件被零碎地上传到您的目录时,它会生成一个恒定的文件修改看门狗事件流。您可以轮询这些而不是文件大小,等待它们停止一段合理的时间,然后假定文件已完成并继续。

这些解决方案都不是完美的,但这似乎是 Watchdog on Windows 的固有问题。不幸的是,“完美”的解决方案似乎是“切换到 Linux 并使用 inotify”。