Skip to main content
 首页 » 编程设计

python之为什么 inspect.getfile 会给我一个不存在的文件

2025年05月04日12daizhj

或者,Saltstack + docker-py AttributeError: 'RecentlyUsedContainer' object has no attribute 'lock'

我一直在深入研究这个问题,但无济于事。我正在尝试使用 SaltStack 来管理我的 docker 图像/容器,但遇到了 this problem .

最初我使用的是盐状态 docker.running 但显示为命令不存在。当我将状态更改为 docker.running 时,我得到了我在那个 GitHub 问题上发布的回溯:

      ID: scheduler 
Function: docker.pulled 
  Result: False 
 Comment: An exception occurred in this state: Traceback (most recent call last): 
            File "/usr/lib/python2.7/dist-packages/salt/state.py", line 1563, in call 
              **cdata['kwargs']) 
            File "/usr/lib/python2.7/dist-packages/salt/states/dockerio.py", line 271, in pulled 
              returned = pull(name, tag=tag, insecure_registry=insecure_registry) 
            File "/usr/lib/python2.7/dist-packages/salt/modules/dockerio.py", line 1599, in pull 
              client = _get_client() 
            File "/usr/lib/python2.7/dist-packages/salt/modules/dockerio.py", line 277, in _get_client 
              client._version = client.version()['ApiVersion'] 
            File "/usr/local/lib/python2.7/dist-packages/docker/client.py", line 837, in version 
              return self._result(self._get(url), json=True) 
            File "/usr/local/lib/python2.7/dist-packages/docker/clientbase.py", line 86, in _get 
              return self.get(url, **self._set_request_timeout(kwargs)) 
            File "/usr/local/lib/python2.7/dist-packages/requests/sessions.py", line 310, in get 
              #: Stream response content default. 
            File "/usr/local/lib/python2.7/dist-packages/requests/sessions.py", line 279, in request 
            File "/usr/local/lib/python2.7/dist-packages/requests/sessions.py", line 374, in send 
              url=request.url, 
            File "/usr/local/lib/python2.7/dist-packages/requests/adapters.py", line 155, in send 
              **proxy_kwargs) 
            File "/usr/local/lib/python2.7/dist-packages/docker/unixconn/unixconn.py", line 74, in get_connection 
              with self.pools.lock: 
          AttributeError: 'RecentlyUsedContainer' object has no attribute 'lock' 
 Started: 09:33:42.873628 
Duration: 22.115 ms 

在 Google 上多搜索了一下,一无所获,我继续并开始了 reading the source .

在阅读 unixconn.py 并意识到 RecentlyUsedContainer 来自 urllib3 之后,我去追踪它的源代码并发现有一个 _lock 属性,刚才更改为 lock。这似乎很奇怪。

我仔细查看了导入并意识到 unixconn.py 试图使用请求的内置 urllib3,然后然后回退到独立的 urllib3。所以我检查了请求 urllib3 并发现它确实有 _lock -> lock 更改。但它比我的 版本的请求更新。所以我升级了请求并再次尝试。仍然没有骰子 - 相同的 AttributeError。

现在事情开始变得奇怪了。

为了将信息返回给我的 salt master,我开始在我的 salt minion 上处理 docker-py 和 urllib3 代码。起初我用 urllib3.__file__ 引发异常以确保我使用的是正确的文件。但有时它返回的文件名位于一个不存在的文件和文件夹中。通常它显示 /usr/local/lib/python2.7/dist-packages/requests/packages/urllib3/_collections.pyc,但是当我删除该文件时认为 .pyc 可能是缓存导致了一个问题,它仍然会说那是 __file__,即使它不存在。

然后我发现了inspect.getfile。我得到了同样奇怪的行为 - 我可以删除 .pyc 文件,但 inspect.getfile(self.pools) 会返回不存在的文件。

为了让生活更美好,我添加了

raise Exception('Pining for the Fjords') 

到

/usr/local/lib/python2.7/dist-packages/requests/packages/urllib3/_collections.py 

在 RecentlyUsedContainer.__init__ 的末尾。然而,该异常不会引发。

而且我刚刚确认某些事情 实际上是在骗我,因为尽管更改了 unixconn.py

 def get_connection(self, url, proxies=None):                                 
     import inspect                                                           
     r = RecentlyUsedContainer(10)                                            
     raise Exception(inspect.getfile(r.__class__) + '\n' + r.__doc__)  

返回 /usr/local/lib/python2.7/dist-packages/requests/packages/urllib3/_collections.pyc,当我编辑那个 .pyc 并修改 RecentlyUsedContainer 的文档字符串我得到原始文档字符串。

最后,当我编辑 /usr/lib/python2.7/dist-packages/urllib3/_collections.pyc 并更改 它的 文档字符串时,(或相同的路径而不是 _collections.py)...

我仍然得到相同的文档字符串!

为什么这里执行了错误的代码,我怎样才能找到错误代码的位置以便解决问题?

请您参考如下方法:

所以我终于想通了问题:

它确实与盐有关。出于某种原因,salt minion 导入 docker-py 库的方式做了某种......部分保留了导入。我怀疑发生的事情是 salt 重新导入 只是 docker-py 库,所以当我对这些文件进行更改时,更改会显示出来。

但是,由于 Python 导入机制将首先搜索预先导入的模块,所以 urllib3 代码从未被重新导入。

最终所需要做的就是重启 salt minion:

salt 'my-minion' cmd.run "nohup /bin/sh -c 'sleep 10 && salt-call --local service.restart salt-minion'"