经验首页 前端设计 程序设计 Java相关 移动开发 数据库/运维 软件/图像 大数据/云计算 其他经验
当前位置:技术经验 » 程序设计 » Python » 查看文章
『Python底层原理』--CPython的变量实现机制
来源:cnblogs  作者:wang_yb  时间:2025/2/20 10:39:09  对本文有异议

Python中,变量的使用看起来非常简单,例如 a = 10s = "hello"等等。

然而,这种简单的赋值操作背后,CPython其实做了很多复杂的工作。

本文将通过一些简单易懂的代码示例,一起探索Python变量背后的奥秘,让我们对它的实现机制有更深一步的理解。

1. 变量到底是什么?

Python中,变量本质上是一个名字到值的映射。

例如,当你写a = 1时,a是一个名字,而1是一个值。

CPython会将这个名字关联起来,以便你后续可以通过名字访问这个

  1. a = 1
  2. print(a) # 输出:1

这种映射关系是通过一个名为命名空间的结构实现的。

命名空间是一个字典,其中的键是变量名,值是变量对应的对象。

它的定义可参考CPython源码中的Include/internal/pycore_frame.h文件。

  1. typedef struct _PyInterpreterFrame {
  2. // 省略... ...
  3. PyObject *f_globals; /* Borrowed reference. Only valid if not on C stack */
  4. PyObject *f_builtins; /* Borrowed reference. Only valid if not on C stack */
  5. PyObject *f_locals; /* Strong reference, may be NULL. Only valid if not on C stack */
  6. // 省略... ...
  7. }

其中,f_locals 保存局部变量映射,函数执行时,局部变量值存于此;

f_globals 用于全局变量,模块级代码块执行时,f_globals 指向模块全局命名空间字典;

f_builtins 关联内置命名空间。

2. 变量的底层实现:字节码

CPython在执行代码时,会先将代码编译成字节码,然后由虚拟机执行这些字节码。我们可以通过 dis 模块查看代码的字节码。

例如,对于a = 1,字节码如下:

  1. import dis
  2. code = """
  3. a = b
  4. """
  5. dis.dis(code)

  • LOAD_NAME:从命名空间中加载变量b的值
  • STORE_NAME:将值存储到变量a

这两个指令展示了CPython如何处理变量的读取和赋值。

3. 命名空间与作用域

Python中的变量存储在不同的命名空间中,而这些命名空间又与代码的作用域相关,作用域决定了变量的可见性。

Python有三种主要的作用域:

  1. 局部作用域:函数内部的变量
  2. 全局作用域:模块级别的变量
  3. 内置作用域:包含内置函数和类型的命名空间
  1. x = "global" # 全局变量
  2. def func():
  3. y = "local" # 局部变量
  4. print(x) # 输出:global
  5. print(y) # 输出:local
  6. func()

在这个例子中,x是全局变量,y是局部变量。

如果在函数中尝试访问一个未定义的变量,CPython会按照以下顺序查找:

  1. 局部命名空间(f_locals

  2. 全局命名空间(f_globals

  3. 内置命名空间(f_builtins

如果仍然找不到,就会抛出NameError异常。

4. 不同变量的字节码

CPython为不同作用域的变量提供了不同的字节码指令,以优化性能和实现特定的行为。

4.1. 局部变量

在函数中,局部变量使用LOAD_FASTSTORE_FAST指令。

这些指令直接操作一个数组,而不是字典,因此速度更快。

  1. def func():
  2. a = 1 # STORE_FAST
  3. b = a # LOAD_FAST
  4. return b
  5. dis.dis(func)

4.2. 全局变量

全局变量使用LOAD_GLOBALSTORE_GLOBAL指令。

这些指令会直接操作全局命名空间。

  1. x = 1
  2. def func():
  3. global x
  4. x = 2 # STORE_GLOBAL
  5. return x # LOAD_GLOBAL
  6. dis.dis(func)

4.3. 闭包变量

当函数嵌套时,内部函数可以访问外部函数的变量。

这些变量称为闭包变量,使用LOAD_DEREFSTORE_DEREF指令。

  1. def outer():
  2. x = 1
  3. def inner():
  4. return x # LOAD_DEREF
  5. return inner
  6. dis.dis(outer)

5. 类中的变量

在类定义中,变量的行为与函数不同。

类定义中的变量使用LOAD_NAMESTORE_NAME指令,因为类的命名空间会动态地与全局命名空间交互。

  1. x = "global"
  2. class MyClass:
  3. print(x) # 使用 LOAD_NAME
  4. x = "local"
  5. print(x) # 使用 LOAD_NAME
  6. MyClass()

输出:

查看指令的话,可以使用:python.exe -m dis .\cpython-variable.py命令。

如果在类中使用嵌套函数,CPython会使用LOAD_CLASSDEREF指令来处理闭包变量。

  1. class MyClass:
  2. x = "cell"
  3. def method(self):
  4. print(x) # 使用 LOAD_CLASSDEREF
  5. MyClass().method()

6. 编译器如何选择指令

CPython的编译器会根据变量的作用域和代码块类型选择合适的字节码指令。

例如:

  • 如果变量是局部变量,编译器会生成LOAD_FASTSTORE_FAST
  • 如果变量是全局变量,编译器会生成LOAD_GLOBALSTORE_GLOBAL
  • 如果变量是闭包变量,编译器会生成LOAD_DEREFSTORE_DEREF

7. 总结

Python变量的实现机制比看起来复杂得多,它涉及到字节码指令、命名空间、作用域以及编译器的决策逻辑。

通过理解这些概念,可以更好地掌握Python的变量行为,尤其是在复杂的作用域场景中。

如果对CPython的实现感兴趣,可以进一步阅读其源码中与变量相关的部分。

原文链接:https://www.cnblogs.com/wang_yb/p/18725414

 友情链接:直通硅谷  点职佳  北美留学生论坛

本站QQ群:前端 618073944 | Java 606181507 | Python 626812652 | C/C++ 612253063 | 微信 634508462 | 苹果 692586424 | C#/.net 182808419 | PHP 305140648 | 运维 608723728

W3xue 的所有内容仅供测试,对任何法律问题及风险不承担任何责任。通过使用本站内容随之而来的风险与本站无关。
关于我们  |  意见建议  |  捐助我们  |  报错有奖  |  广告合作、友情链接(目前9元/月)请联系QQ:27243702 沸活量
皖ICP备17017327号-2 皖公网安备34020702000426号