我已经从 ipython 0.10 切换到 1.1.0。现在,我遇到了非常烦人的启动过程减速问题。
虽然单独的 ipython 仍然很快启动,但 ipython --pylab 启动非常慢,即 ~8 秒(在一个 Intel(R) Core(TM)2 Duo CPU P9500 @ 2.53GHz 系统)甚至更多我在 ipython 0.10 中没有的新的 ipython notebook,即 ~12 secs.
当我执行 strace -o tessi.txt -tt ipython --pylab 时,我至少可以识别出似乎是这些延迟的大部分原因的部分。非常欢迎任何有关摆脱这些的帮助。
对于 --pylab 选项,strace 的输出包含一个占用 ~5 secs 的部分,并且在仅启动 ipython 时不存在,即
10:23:24.331968 stat("/etc/resolv.conf", {st_mode=S_IFREG|0644, st_size=868, ...}) = 0
10:23:24.332028 socket(PF_FILE, SOCK_STREAM|SOCK_CLOEXEC|SOCK_NONBLOCK, 0) = 9
10:23:24.332074 connect(9, {sa_family=AF_FILE, path="/var/run/nscd/socket"}, 110) = 0
10:23:24.332152 sendto(9, "\2\0\0\0\4\0\0\0\35\0\0\0MYHOST.DOM.AIN."..., 41, MSG_NOSIGNAL, NULL, 0) = 41
!! -> 10:23:24.332227 poll([{fd=9, events=POLLIN|POLLERR|POLLHUP}], 1, 5000) = 1 ([{fd=9, revents=POLLIN|POLLHUP}])
!! -> 10:23:29.336301 read(9, "\2\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0", 32) = 32
10:23:29.336533 close(9) = 0
10:23:29.336839 close(7) = 0
我用 MYHOST.DOM.AIN 替换了我的实际主机名
在 ipython notebook 的情况下,似乎基本上有两个这样的区域。第一个似乎与 ipython --pylab 相同。第二个又拿走了 ~4 secs
10:39:31.823298 stat("/etc/resolv.conf", {st_mode=S_IFREG|0644, st_size=868, ...}) = 0
10:39:31.823358 socket(PF_FILE, SOCK_STREAM|SOCK_CLOEXEC|SOCK_NONBLOCK, 0) = 9
10:39:31.823405 connect(9, {sa_family=AF_FILE, path="/var/run/nscd/socket"}, 110) = 0
10:39:31.823499 sendto(9, "\2\0\0\0\4\0\0\0\35\0\0\0MYHOST.DOM.AIN."..., 41, MSG_NOSIGNAL, NULL, 0) = 41
!! -> 10:39:31.824166 poll([{fd=9, events=POLLIN|POLLERR|POLLHUP}], 1, 5000) = 1 ([{fd=9, revents=POLLIN|POLLHUP}])
!! -> 10:39:36.827298 read(9, "\2\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0", 32) = 32
10:39:36.827503 close(9) = 0
10:39:36.827828 close(7) = 0
10:39:38.591774 setsockopt(6, SOL_TCP, TCP_NODELAY, [0], 4) = 0
10:39:38.591922 poll([{fd=3, events=POLLIN}, {fd=4, events=POLLIN}, {fd=6, events=POLLIN}, {fd=7, events=POLLIN}], 4, 0) = 0 (Timeout)
10:39:38.592007 poll([{fd=3, events=POLLIN}, {fd=4, events=POLLIN}, {fd=6, events=POLLIN}, {fd=7, events=POLLIN}], 4, 0) = 0 (Timeout)
!! -> 10:39:38.592049 poll([{fd=3, events=POLLIN}, {fd=4, events=POLLIN}, {fd=6, events=POLLIN}, {fd=7, events=POLLIN}], 4, 3600000) = ? ERESTART_RESTARTBLOCK (To be restarted)
!! -> 10:39:42.355658 --- SIGINT (Interrupt) @ 0 (0) ---
10:39:42.355773 write(5, "\0", 1) = 1
10:39:42.355916 rt_sigreturn(0x2) = -1 EINTR (Interrupted system call)
10:39:42.356113 rt_sigaction(SIGINT, {0x7f26dc0fbfc6, [], SA_RESTORER, 0x7f26dbe5a2d0}, {0x7f26dc0fbfc6, [], SA_RESTORER, 0x7f26dbe5a2d0}, 8) = 0
10:39:42.356672 clone(child_stack=0x7f26cfb49ff0, flags=CLONE_VM|CLONE_FS|CLONE_FILES|CLONE_SIGHAND|CLONE_THREAD|CLONE_SYSVSEM|CLONE_SETTLS|CLONE_PARENT_SETTID|CLONE_CHILD_CLEARTID, parent_tidptr=0x7f26cfb4a9d0, tls=0x7f26cfb4a700, child_tidptr=0x7f26cfb4a9d0) = 11084
我们非常欢迎任何有关如何消除这些延迟的帮助。
最后,当我在做的时候。当我查看 strace 的 remaing 输出时,我看到,在启动时,ipython 试图在我天真地认为它永远不应该这样做的地方打开很多“python 相关”文件,而我的系统 python 绝对没有安装?所有这些公开的电话都失败了。例如:
11:11:26.465594 open("/opt/intel/composerxe-2011.3.174/compiler/lib/intel64/tls/libpython2.7.so.1.0", O_RDONLY) = -1 ENOENT (No such file or directory)
11:11:26.465646 stat("/opt/intel/composerxe-2011.3.174/compiler/lib/intel64/tls", 0x7fff0efb0100) = -1 ENOENT (No such file or directory)
or
11:11:26.468293 stat("/usr/local/lib/vtk-5.4/tls/x86_64", 0x7fff0efb0100) = -1 ENOENT (No such file or directory)
11:11:26.468347 open("/usr/local/lib/vtk-5.4/tls/libpython2.7.so.1.0", O_RDONLY) = -1 ENOENT (No such file or directory)
这些调用的总时间弥补了剩余缓慢启动的另一重要部分,但我无法指出具体的时间段。知道如何减少这些电话吗?
请您参考如下方法:
1) 我建议不要从 --pylab 开始,我们鼓励人们一旦开始就使用 %matplotlib。使用 --pylab 时启动的开销很可能是由于导入了我们无权访问的包。例如,ArchLinux 上存在错误,其中每个 ipython --pylab 占用数百 MB,因为内存泄漏不在 IPython 代码中。
对套接字的访问似乎仍然很奇怪,了解它的确切来源可能会有所帮助。
2) 第二个笔记本可能是由于 ZMQ 和本地主机上通过套接字进行的一些通信的开始。我们知道在某些情况下它可能需要一些时间,但我们还需要找出代码的哪一部分做起来很慢。笔记本电脑还启动了一个网络服务器,因此可以进行网络操作。
3) 可能是由于我们使用了一些库,我们没有在 ipython 中显式打开此类文件。特别是VTK。您是否有加载特定内容的配置文件?
您可以尝试在 IPython 跟踪器上打开一个问题,但我们可能会要求您更深入地了解 ipython 中花费这么多时间的 python 调用是什么。启动时间的问题已经在 core dev 之间问过了。
大家一致认为这将是“尽力而为”,但我们显然是一个太小的团队,无法将此作为优先事项。仍然与 vbech 等工具集成以跟踪回归会很好,如果有人有动力深入研究慢速调用,我们将很乐意尽最大努力改进。
