Python timeit 的常见误用总结

timeit.timeit() 的 setup 参数用于前置初始化,避免将 import 或变量赋值开销计入测试;应将依赖全放 setup,stmt 仅留待测语句;作用域隔离需注意,命令行用 -s 预定义;优先用 repeat 取最小值而非平均值;timeit 仅适合纯 cpu 计算场景。

timeit.timeit() 的 setup 参数为什么总被忽略

很多人直接把测试代码塞进 stmt,却忘了初始化变量或导入模块——结果测的不是函数执行时间,而是 import 或赋值开销。比如测 json.loads() 却没提前定义好字符串,每次调用都重新生成,setup 就是干这个的。

实操建议:

Python v2.4 中文手册 chm

Python v2.4版chm格式的中文手册,内容丰富全面,不但是一本手册,你完全可以把她作为一本Python的入门教程,教你如何使用Python解释器、流程控制、数据结构、模板、输入和输出、错误和异常、类和标准库详解等方面的知识技巧。同时后附的手册可以方便你的查询。

下载

  • setup 里放所有前置依赖:导入、变量定义、对象构造
  • 避免在 stmt 里写 import jsons = '{"a": 1}',它们该进 setup
  • 如果用字符串形式调用,setupstmt 是独立作用域,不能共享变量名(除非用 globals

错误示例:

timeit.timeit('json.loads(s)', number=100000)

——sjson 都未定义,会报 NameError

用 timeit.repeat() 而不是多次调用 timeit.timeit()

单次 timeit.timeit() 结果波动大,尤其在有 GC、CPU 频率调节、后台进程干扰时。这不是精度问题,是测量方法本身不可靠。

实操建议:

  • 默认用 timeit.repeat(repeat=5, number=100000),取返回列表最小值(排除抖动峰值)
  • 别手动循环调用 timeit.timeit() 五次再求平均——平均值会掩盖异常延迟,最小值才反映真实下限
  • repeatnumber 更影响稳定性:增大 number 只是延长单次运行,但 repeat 是真正重启计时上下文

命令行 timeit 怎么传带参数的函数

命令行模式不支持闭包或局部变量,想测 functools.partial 或带默认参数的函数,容易卡在语法或作用域上。

实操建议:

  • -s(setup)预定义函数和参数:
    python -m timeit -s "from functools import partial; from math import sqrt; f = partial(sqrt, 123)" "f()"
  • 避免在命令行 stmt 中写 lambda 或内联表达式(如 "(lambda x: x**2)(5)"),编译开销混入结果
  • 如果函数需要模块级状态(如缓存),命令行模式很难模拟,优先改用脚本内调用

timeit 测的是纯 CPU 时间,不代表真实场景性能

timeit 默认关闭 GC、禁用线程切换、反复执行同一段代码——这跟 Web 请求、文件读写、数据库查询等 I/O 密集型场景完全脱节。

实操建议:

  • 测 I/O 操作(如 open()requests.get())基本没意义:网络延迟、磁盘缓存、连接复用都会让结果失真
  • 对含 print()loggingtime.sleep() 的代码,timeit 测出的只是“触发开销”,不是实际耗时
  • 真正要对比算法性能?确保两者都纯计算、无副作用、输入规模一致;否则不如用 cProfile 看真实调用栈

最容易被忽略的一点:timeit 的 number 不是“执行次数”而是“语句重复执行次数”,它不展开函数内部逻辑——你看到快,可能只是因为函数体短,而不是算法优。

相关推荐:

如何在Python中为测试用例添加自定义标记_通过pytest.mark进行分类执行

pytest.mark 必须作为装饰器直接作用于测试函数或类,不可写在函数外部;可叠加多个标记,执行时用 -m "mark1 and mark2" 等布尔表达式筛选;未注册标记会触发警告,需在 pytest.ini 或 pyproject.toml 中声明以避免。 pytest.mark 能不能直接用在函数外面 不能。所有 pytest.mark 必须装饰在测试函数或类上,写在函数定义之外会报 S...
· Python · 143402

如何在Python中构建树状结构的递归生成器_使用yield from简化递归代码

yield from 在树遍历中省去了手动展开子生成器的繁琐与风险,自动处理委托调用、异常传播、StopIteration 捕获及协程方法转发,确保扁平化输出和行为一致性。 yield from 在树遍历中到底省了什么 直接说结论:yield from 不是语法糖,它把递归生成器的“委托调用”从手动循环 + yield 拆解成一条语句,避免了中间迭代器被提前耗尽、异常传播断裂、或 StopIter...
· Python · 114541

如何解决Python中的UnboundLocalError局部变量引用错误_使用global或nonlocal关键字声明

Python函数内同名变量报UnboundLocalError,因编译期将赋值变量标记为局部,读取在赋值前则出错;global用于模块级变量,nonlocal用于最近外层函数变量,二者不可混用且需提前声明。 为什么在函数里修改同名变量会报 UnboundLocalError Python 在编译函数时,只要看到某个变量在函数体内有赋值操作(哪怕只在 if 分支里),就会把它标记为局部变量。之后如果...
· Python · 310972

为什么Python脚本内存占用居高不下_使用objgraph与gc模块排查泄露

Python内存泄漏主因是对象被隐性持有而非未调gc.collect(),可用objgraph.show_growth()定位异常增长类型,再用gc.get_referrers()逆向追踪强引用源,并结合RSS监控与gc调试确认真实泄漏。 Python 脚本内存持续上涨,大概率不是“没调 gc.collect()”,而是对象根本没被识别为可回收——比如被全局容器悄悄持有、含 __del__ 的循环...
· Python · 295055

如何在Python Flask中集成Click命令行工具_使用app.cli.command

app.cli.command命令不出现的主因是Flask实例未完成初始化或注册时机过早;需确保在create_app()返回后注册,且装饰器顺序为@app.cli.command在上、@click.option等在下,同时避免顶层导入时执行注册。 为什么 app.cli.command 注册的命令不出现? 最常见原因是 Flask 应用实例未正确初始化 CLI 上下文,或者命令注册时机早于 ap...
· Python · 161833

为什么Python Tkinter Canvas保存的图片是空白_使用ImageGrab截取组件

Canvas无法直接保存为图片,需用ImageGrab截屏并精确计算坐标,Windows高DPI下须启用DPI感知并缩放坐标;更可靠方案是用PIL重绘所有元素。 Canvas 本身不支持直接保存为图片文件,所谓“保存空白”不是 bug,而是你根本没在保存 Canvas 的内容 Canvas 没有内置 save() 或 export() 方法 Tkinter 的 Canvas 是一个绘图容器,它只负...
· Python · 275534

Python Django 5.0如何使用异步视图提高并发_定义async def视图函数

Django 5.0 的 async 视图必须搭配 ASGI 服务器(如 uvicorn)运行,数据库操作需用 sync_to_async 包装或原生异步方法,避免阻塞事件循环;中间件、装饰器也须显式声明为 async 才能协同工作。 async def 视图函数必须搭配 ASGI 服务器运行 Django 5.0 的 async def 视图不会在 WSGI(如 Gunicorn + uWSGI...
· Python · 162932

如何利用Python实现定时抓取股票行情数据_通过Schedule库设置任务调度

直接用 schedule 库做股票行情定时抓取大概率失败,因其无异常处理、并发管理、重试机制及非交易日跳过能力;需配合 try...except、time.sleep、日志记录、交易日校验、请求头与超时设置、并发控制及数据校验等防护措施才能稳定运行。 直接用 schedule 库做股票行情定时抓取,不加防护机制的话,大概率会失败——它本身不处理异常、不管理并发、也不重试,更不会自动跳过非交易日。 ...
· Python · 181549