渗透网站做seo,湛江搭建做网站在哪里做,wordpress 公司门户,做外贸一般在哪个网站一、背景
在SAAS#xff08;软件即服务#xff09;平台中#xff0c;用户使用自行定制的Python脚本已经成为司空见惯的做法#xff0c;然而#xff0c;由于不同用户对Python三方库的需求各不相同#xff0c;而底层服务器一般只安装了一个Python版本。举例来说#xff0…一、背景
在SAAS软件即服务平台中用户使用自行定制的Python脚本已经成为司空见惯的做法然而由于不同用户对Python三方库的需求各不相同而底层服务器一般只安装了一个Python版本。举例来说假设用户A需要pymysql1.0.2版本而用户B需要pymysql1.0.3版本那么我们该如何应对呢
当我们考虑将系统安装的Python的pymysql三方库依赖升级至1.0.3版本时这必然会对用户A产生潜在的风险和影响。这就迫使我们需要一种解决方案能够满足不同用户或租户对不同Python库版本的需求而不会相互干扰。这也是本文要深入阐述的关键内容。
解决方案就在于Python虚拟环境。通过创建独立的、隔离的Python运行环境我们可以满足不同用户对Python库的需求而无需牵扯到底层服务器已安装的Python版本。这使得每个用户或租户能够拥有自己的Python环境可以在其中自由地安装、更新和管理所需的Python库而不会干扰其他用户。
二、原理
2.1、Python依赖关系
在 Python 的生态系统中依赖分为标准库和三方库两种它们在开发过程中起着不同的作用
标准库是由Python官方团队维护和发布的一组模块和库。这些模块和库包含了丰富的工具和功能涵盖了文件I/O、字符串操作、网络通信、数学计算、数据结构、日期时间处理等方面。这些模块是Python解释器的一部分在安装Python时会一同安装。标准库的模块常被广泛应用于各类Python应用程序中因为它们保证了跨平台的兼容性和稳定性。三方库则是由Python社区贡献和维护的库这些库提供了丰富的功能包括数据处理、Web开发、科学计算等领域。与标准库不同三方库不随Python解释器的安装而自动包含需要使用包管理工具如pip来安装。它们的多样性和灵活性为开发者提供了更广泛的选择空间可以根据特定需求轻松获取所需功能。安装目录在文件系统中Python标准库的模块位于安装目录下的Lib目录内而三方库则被安装在Lib/site-packages目录下。这种结构有助于开发者在系统中准确找到和管理所需的库如下图 2.2、虚拟环境依赖原理
Python虚拟环境实现了一种高效的依赖隔离机制其核心原理在于充分利用系统Python的标准库而三方库则被完全隔离存储于虚拟环境中的独立目录。
在Python虚拟环境中标准库的管理与系统Python的标准库实现共享。这意味着虚拟环境不会单独复制系统Python的标准库而是通过指向系统Python标准库的符号链接进行访问。这种方式确保了虚拟环境中的Python标准库与系统Python保持同步同时避免了资源浪费。
与标准库不同三方库在虚拟环境中得到了彻底的隔离。每个虚拟环境都拥有自己独立的Lib/site-packages目录用于存储安装的三方库。通过这种机制不同虚拟环境内的项目可以安全地使用不同版本或不同组合的三方库而无需担心相互干扰或产生冲突如下图 三、实战
3.1、venv、pyvenv 和 virtualenv 区别
创建Python虚拟环境通常有三种常用的命令venv、pyvenv 和 virtualenv。
venv: venv 是 Python 3.3 及以上版本自带的标准库模块。这个命令能够快速创建Python虚拟环境并提供了一种简洁而有效的方式来隔离项目的依赖关系。使用方法是通过运行 python -m venv myenv 来创建一个名为 myenv 的虚拟环境。 pyvenv: pyvenv 是 Python 3.3 之前版本中的一个命令用于创建虚拟环境。它的功能与 venv 类似但在较新的Python版本中已经不再推荐使用并被 venv 替代。 virtualenv: virtualenv 是一个第三方库能够在 Python 2.x 和 3.x 版本中使用。与前两者不同virtualenv 提供了更多的灵活性和高级选项可以为用户提供更加定制化的虚拟环境。通过运行 pip install virtualenv 安装后可以使用命令 virtualenv myenv 创建一个名为 myenv 的虚拟环境。
总体来说venv 和 virtualenv 是创建Python虚拟环境最常用的方式。venv 是Python自带的标准库模块提供了基本的虚拟环境功能而 virtualenv 则提供了更多定制和高级选项能够满足更复杂的需求。pyvenv 已在较新版本的Python中被弃用建议使用更为推荐的 venv。
3.2、创建虚拟环境
先通过执行 venv 指令来创建一个 虚拟环境: 运行此命令将会生成一个目标目录如果其父目录不存在也会被创建
rootb3268f2479f8:~# python3 -m venv /usr/local/env/myenv
rootb3268f2479f8:~# ll /usr/local/env/myenv
total 16
drwxr-xr-x 2 root root 4096 Dec 15 06:48 bin
drwxr-xr-x 3 root root 4096 Dec 15 06:48 include
drwxr-xr-x 3 root root 4096 Dec 15 06:48 lib
lrwxrwxrwx 1 root root 3 Dec 15 06:48 lib64 - lib
-rw-r--r-- 1 root root 177 Dec 15 06:48 pyvenv.cfg同时在目标目录中会放置一个名为pyvenv.cfg的文件。这个配置文件内包含了一个home键指向运行此命令的 系统 Python 命令位置
rootb3268f2479f8:~# cat /usr/local/env/myenv/pyvenv.cfg
home /usr/local/bin
include-system-site-packages false
version 3.12.1
executable /usr/local/bin/python3.12
command /usr/local/bin/python3 -m venv /usr/local/env/myenv此外命令还会在目标目录中创建一个bin子目录其中包含了 Python 可执行文件的拷贝或符号链接。同时还会建立一个初始为空的lib/pythonX.Y/site-packages子目录用于存放虚拟环境执行pip安装的三方库 3.3、激活虚拟环境
激活一个虚拟环境可以通过source 一个脚本来实现。在 linux 系统上该脚本位于 bin 目录下的 activate。这个激活操作的效果是将该目录添加到你的 PATH 环境变量中。这样当你运行 python 时系统会调用虚拟环境的 Python 解释器使你能够轻松运行虚拟环境中安装的脚本而无需使用完整的路径信息如下 激活虚拟环境后命令行头部会显示虚拟环境的名称myenv以提示你当前所处的环境此时执行pip依赖三方库命令由于虚拟环境被激活故此时执行的pip命令会因为环境变量使用该虚拟环境中的pip而不是系统全局的pip。 可以看到kafka依赖只存在于虚拟环境三方库目录系统环境不受影响。
3.4、停用虚拟环境
停用或退出虚拟环境只需执行 deactivate 命令即可。执行该命令后命令行提示符中不再显示虚拟环境的名称并且系统的 $PATH 环境变量会回到默认状态如下
# 激活时$PATH
(myenv) rootb3268f2479f8:/usr/local/env/myenv# echo $PATH
/usr/local/env/myenv/bin:/usr/local/bin:/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin# 停用时$PATH
(myenv) rootb3268f2479f8:/usr/local/env/myenv# deactivate
rootb3268f2479f8:/usr/local/env/myenv# echo $PATH
/usr/local/bin:/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin3.5、直接使用虚拟环境
其实激活虚拟环境并不是必须的因为你可以直接指定特定虚拟环境的Python解释器完整路径来调用Python。更进一步地说安装在虚拟环境中的所有脚本也可以在不激活虚拟环境的情况下运行例如 此外如果我们要使用虚拟环境的Python来执行python脚本我们可以在脚本中包含一个以“井号叹号”开头的行用来指定虚拟环境的Python解释器路径例如 #!/path-to-venv/bin/python。这意味着无论$PATH的取值如何该脚本都将使用指定的解释器来运行。
以下是一个示例假设有一个名为example_script.py的脚本它指定了虚拟环境中Python解释器的路径
#!/usr/local/env/myenv/bin/pythondef main():print(这个脚本安装在虚拟环境中并使用指定的解释器运行)if __name__ __main__:main()
在这个示例中#!/usr/local/env/myenv/bin/python 表示脚本将使用位于虚拟环境中的Python解释器来执行。
因此无需激活虚拟环境该脚本都将使用特定虚拟环境中的解释器来运行。
3.6、删除虚拟环境
由于Python虚拟环境被视为可以随时丢弃和重建的你可以直接使用 rm 命令在Unix或类Unix系统中来删除整个虚拟环境目录。
假设你的虚拟环境名称为 myenv你可以在命令行中执行以下命令来删除
rootb3268f2479f8:/usr/local/env# rm -rf myenv/请注意这样的删除操作是不可逆的。删除后虚拟环境中的所有数据和安装的包都将被永久移除。确保你删除的是正确的虚拟环境路径以免不小心删除了重要数据。
3.5、虚拟环境迁移部署
由于安装在虚拟环境中的脚本不要求必须激活该虚拟环境因此它们的“井号叹号”行会包含虚拟环境的绝对路径如下图 这种情况下虚拟环境是不可移植的。为确保便捷地重建虚拟环境你应当提供简便的方式例如若你已准备好需求文件 requirements.txt可使用虚拟环境的 pip 执行 pip install -r requirements.txt 命令来安装虚拟环境所需的所有软件包如下
# 创建requirements.txt
(myenv) rootb3268f2479f8:/usr/local/env/myenv# pip freeze requirements.txt
(myenv) rootb3268f2479f8:/usr/local/env/myenv# cat requirements.txt
certifi2023.11.17
charset-normalizer3.3.2
confluent-kafka2.3.0
idna3.6
requests2.31.0
urllib32.1.0如果因某种原因你需要将虚拟环境移动到新位置你应当在目标位置上重新创建虚拟环境并删除旧位置上的虚拟环境。同样如果你移动了虚拟环境的上级目录也应在新位置上重新创建虚拟环境。否则安装在该虚拟环境中的软件包可能无法正常运行。
举例来说假设你在 /usr/local/env/myenv 目录下创建了一个虚拟环境现在你想将它移动到 /usr/local/env/myenv2/ 目录。你可以执行以下步骤 在目标位置上重建虚拟环境 python3 -m venv /usr/local/env/myenv2 # 使用 venv 创建一个名为 myenv 的新虚拟环境使用 requirements.txt 安装所需的软件包 cd /usr/local/env/myenv2
source bin/activate # 激活新的虚拟环境
pip install -r /usr/local/env/myenv/requirements.txt这样可以确保在新位置重新创建了虚拟环境并安装了相同的软件包。移动虚拟环境时务必谨慎操作以确保其中的软件包能够正常工作。
四、结语
Python虚拟环境是Python开发者不可或缺的利器。它为开发者提供了一个独立、隔离的Python工作空间使得不同项目之间的依赖管理更为灵活和高效。通过虚拟环境开发者可以轻松地控制Python版本和安装的库确保项目开发的稳定性和可靠性。
五、相关资料
python虚拟环境官方文档
