我是 Python 的新手,我正在尝试实现良好的“文件创建”检测。如果我不放置 time.sleep(x),我的文件将以错误的方式详细说明,因为它们仍在文件夹中“创建”。 (缓冲区不为空) 我如何在每次创建文件时不等待 x 秒的情况下规避这个问题?
这是我的代码:
主要内容:
while 1:
if len(parser()) > 0: # arguments are valid
if len(parser()) == 3:
log_path = parser()['log_path']
else:
log_path = os.getcwd()
paths = parser()
if paths:
handler = Event_Handler()
observer = Observer()
observer.schedule(handler, paths['src_fld'], True)
observer.start()
try:
while True:
time.sleep(1)
except KeyboardInterrupt:
observer.stop()
observer.join()
else:
exit(1)
Event_Handler 类:
class Event_Handler(FileSystemEventHandler):
def on_created(self, event):
if not event.is_directory:
time.sleep(1)
正如我所说,如果没有 time.sleep(1),如果我尝试处理一个大文件,我会失败,因为它还没有完全写入。
请您参考如下方法:
对于像我一样偶然发现这个问题的任何 future 读者,答案似乎是你不能。 Watchdog 不支持也不会支持任何功能来判断文件是否“完整”,因为 Windows 不允许这样做,并且 Watchdog 与系统无关。
如果您使用的是 Linux 或它的某些发行版,inotify 可能是一个安全的选择。否则,在 Windows 上,我发现的最佳解决方案是:
上传一个大文件bigfile,然后上传另一个文件bigfile-complete。当您找到一个文件名称-完整时,您返回并上传/传输/响应原始文件名称。在这种情况下,您的文件将全部添加到队列中的受监视目录中,队列依次为 file、file-complete、file2、 file2-完成,. . .
轮询文件的大小,直到它在一段合适的时间内保持固定。当它没有足够长的时间改变以至于你可以合理地确定它已经完成时,像往常一样对它使用react。
同样,当一个文件被零碎地上传到您的目录时,它会生成一个恒定的文件修改看门狗事件流。您可以轮询这些而不是文件大小,等待它们停止一段合理的时间,然后假定文件已完成并继续。
这些解决方案都不是完美的,但这似乎是 Watchdog on Windows 的固有问题。不幸的是,“完美”的解决方案似乎是“切换到 Linux 并使用 inotify”。
