如何加快Python 应用的启动时间
我听说pipenv9.0.2已经发布,启动时间有了很大的改进。
我很快就试了一下,但我觉得并不快。所以我用Python3.7的新特性来研究它。
在本文中,我将介绍该特性以及如何使用它。
启动时间≒导入时间
例如,pipenv -h 的执行时间比显示帮助消息的时间长得多。
一般来说,当应用程序启动时,会有一些启动过程,比如加载环境变量或配置文件。
对于Python应用程序,导入模块占用了大部分启动时间。例如,pipenv --version 花费了大约800ms,而import pipenv 花费了700ms。
显示模块的导入时间
Python 3.7有新的特性来显示导入模块的时间。
这个特性是通过 -X importtime 选项或 PYTHONPROFILEIMPORTTIM 环境变量来启用的。
例如,您可以利用以下命令来测试pipenv的导入时间:
或
这里是一个pipenv --version输出结果的例子 。
研究导入时间
在输出的最后面,你会看到这些行:
在最后一行,579479表示 import pipenv 需要579479us。
在导入pipenv的同时,还导入了许多其他模块。从上面的示例中,您可以看到 pipenv 导入了pipenv.cli。子导入以2个空格缩进。
再看最后一行。507表示运行pipenv模块时只需要507us。579479-507=578972us用于子导入。
找出缓慢的部分
我们来从输出中找到缓慢子树。我选取了几行。
pkg_resources
如您所见,导入pkg_resources 很缓慢。
但令人惊讶的是,pkg_resources没有进行缩进;它不是pipenv的子导入。
这意味着pkg_resources是由pipenv脚本而不是模块导入的。
坏消息: 导入pkg_resources很慢。这是一个已知的问题,在不破坏向后兼容性的情况下很难修复。
好消息: 您可以避免导入pkg_resources!
在安装了wheel之后,pip会对它进行构建并从构建包进行安装。
从wheel (.whl)和源码包(.tar.gz)安装是不同的过程。
从wheel安装时,脚本中不使用pkg_resources:
IPython
看下面的部分.
pipenv导入dotenv, dotenv再导入 dotenv.ipython,它再导入IPython。
这就是为什么pipenv在我的环境中开始很慢; 我已经安装了IPython。
但是为什么要导入IPython呢?我阅读了dotenv源码,发现它是用于IPython扩展的。
当然,pipenv和许多dotenv用户并不使用IPython扩展。
我向dotenv提交了一个推送请求,建议dotenv根据需要导入IPython。
由于pipenv有自己的dotenv副本,所以我向pipenv提交了完全删除dotenv.ipython的推送请求。
结论
我可以将 pipenv--version 的时间从800ms减少到500ms。
导入时间分析是研究和优化应用程序启动时间的好方法。