Skip to main content
 首页 » 编程设计

python之正在上传的文件偶尔损坏

2025年05月04日19me-sa

下面的代码片段获取在 HTTP 请求 (Ajax) 中发送的文件并将其保存到服务器。代码是别人写的,但我最近不得不修改它,为文件添加一个唯一标识符,这样现有的同名文件就不会被覆盖。本质上,我添加了这些行:

#uid is a GUID 
if os.path.isfile(destination): 
            destination = os.path.splitext(destination)[0] + str(uid) + os.path.splitext(destination)[1] 
            name  = os.path.splitext(name)[0] + str(uid) + os.path.splitext(name)[1] 

我现在看到的问题是,有时我将 UID 添加到文件名以保证唯一性的文件最终会被损坏。它并不总是发生——大多数情况下,文件保存正确,但在过去 7 天的 11 起案例中,至少有 4 起文件已损坏,并且只发生在添加了 UID 的文件中将其保存到文件系统之前的名称。这段代码有什么问题可能导致文件损坏吗?

这里是所用方法的完整上下文:

if form.is_valid(): 
        id = request.REQUEST.get('id','') 
        file = request.FILES['file'] 
        chunk = request.REQUEST.get('chunk','0') 
        chunks = request.REQUEST.get('chunks','0') 
        name = request.REQUEST.get('name','') 
        destination = settings.MEDIA_ROOT+'/files/%s' % name 
        # If the code goes into the below IF, the file MAY get corrupted. 
        if os.path.isfile(destination): 
            destination = os.path.splitext(destination)[0] + str(uid) + os.path.splitext(destination)[1] 
            name  = os.path.splitext(name)[0] + str(uid) + os.path.splitext(name)[1] 
        with open(destination, ('wb' if chunk == '0' else 'ab')) as f:   
            for content in file.chunks():   
                f.write(content)   
        if int(chunk) + 1 >= int(chunks): 
            if not Attachment.objects.filter(uuid=uid,user=username,name=name): 
                form.save(name,username,uid,id) 
 
    response = HttpResponse(json.dumps({"jsonrpc" : "2.0", "result" : None, "id" : "id"}), mimetype='text/plain; charset=UTF-8')   
    return response 

请您参考如下方法:

看起来问题出在文件 uid 的生命周期上。这对于单个文件上传不是问题,但在使用代码的分块上传 功能时会成为问题。

因为 uid 是根据请求生成的,并且每个文件 block 都是在单独的请求中上传的,所以每个 block 都会收到不同的 uid。这反过来会导致 block 1 转到文件 1, block 2 到文件 2,从而导致损坏。

一种解决方法是根据 session key 设置 uid,可通过 request.session.session_key 获得。由于 session key 的加密属性,就此目的而言,它也应该是“合理唯一的”。

但是请注意,如果文件路径暴露在网络上,或者即使 /media/ 可以在目录中列出,也存在潜在的安全风险,因为您将 session key 暴露给网络( session key 是唯一保护对事件 session 的访问的东西)。

另一种更安全的方法是通过 session 变量为每个 session 分配一个唯一的 UUID。这可能最好在 middleware 中完成:

class SessionUUIDMiddleware(object): 
    def process_request(request): 
        session_uuid = request.session.get('uuid', None) 
        if not session_uuid: 
            session_uuid = uuid.uuid1() 
            request.session['uuid'] = session_uuid 

这会断开唯一 ID 与 session key 的连接。