Python怎么测量代码的执行时间_Python代码性能计时与分析方法

答案:Python代码执行时间测量需根据场景选择工具。使用time.perf_counter()可获得高精度、不受系统时间影响的单次计时;timeit模块通过多次重复执行并取最小值,减少外部干扰,适合小段代码性能对比;cProfile则用于分析复杂程序中各函数的调用次数、自身耗时(tottime)和累积耗时(cumtime),帮助定位性能瓶颈。优先选用time.perf_counter()替代time.time()以确保计时准确性。

python怎么测量代码的执行时间_python代码性能计时与分析方法

Python代码执行时间的测量,核心在于选择合适的工具。从简单的计时器到复杂的性能分析器,它们各有侧重,帮助我们理解和优化代码的运行效率。选择合适的测量方法,能让你快速定位代码中的瓶颈,从而进行有针对性的优化。

解决方案

当你需要了解一段Python代码到底跑了多久时,有几种方法可以派上用场。我通常会从最简单、最直观的开始,然后根据需要深入到更专业的工具。

1. 最直接的计时:

time.perf_counter()

这是我个人最常用的快速测量方法。

time.perf_counter()

提供了一个高精度的、单调递增的计时器,非常适合测量短时间间隔。它不会受到系统时间调整的影响,所以比

time.time()

更适合做性能测量。

立即学习“Python免费学习笔记(深入)”;

import timedef my_slow_function():    # 模拟一个耗时操作    sum(range(10**7))start_time = time.perf_counter()my_slow_function()end_time = time.perf_counter()print(f"my_slow_function 执行耗时: {end_time - start_time:.4f} 秒")

2. 精准测量小段代码:

timeit

模块

如果你想对比不同实现方式的性能,或者需要对一小段代码进行更严谨、更独立的性能测试

timeit

模块是你的好帮手。它会多次执行你的代码,并自动处理一些干扰因素(比如垃圾回收),给出相对稳定的结果。

import timeit# 假设我们要比较两种创建列表的方式# 方式一:列表推导stmt_list_comprehension = "[i for i in range(1000)]"# 方式二:for循环appendstmt_for_loop_append = """my_list = []for i in range(1000):    my_list.append(i)"""# setup参数用于设置执行环境,避免在计时代码中包含设置逻辑setup_code = ""# 运行100000次,并重复测试5次,取最好的一次结果time_lc = timeit.timeit(stmt=stmt_list_comprehension, setup=setup_code, number=100000, repeat=5)time_fla = timeit.timeit(stmt=stmt_for_loop_append, setup=setup_code, number=100000, repeat=5)print(f"列表推导耗时 (最佳5次中的一次): {min(time_lc):.6f} 秒")print(f"for循环append耗时 (最佳5次中的一次): {min(time_fla):.6f} 秒")# 你也可以直接用timeit.Timer类timer = timeit.Timer(stmt_list_comprehension, setup_code)print(f"列表推导 (Timer对象): {min(timer.repeat(repeat=5, number=100000)):.6f} 秒")

3. 查找性能瓶颈:

cProfile

模块

当你的代码结构比较复杂,包含多个函数调用,而你又不确定是哪个函数拖慢了整体速度时,

cProfile

(或其纯Python实现

profile

)就派上用场了。它能帮你统计每个函数的调用次数、自身耗时以及包含子函数在内的总耗时,从而帮你定位真正的性能瓶颈。

import cProfileimport timedef func_a():    time.sleep(0.01) # 模拟IO或计算    func_b()    func_c()def func_b():    sum(range(10**5)) # 模拟CPU密集型计算def func_c():    time.sleep(0.005)def main_program():    for _ in range(5):        func_a()# 运行cProfilecProfile.run('main_program()')# 另一种更灵活的使用方式,可以保存结果并用pstats分析# import pstats# pr = cProfile.Profile()# pr.enable()# main_program()# pr.disable()# pr.dump_stats('profile_output.pstats')## # 在另一个脚本或交互式环境中分析# # p = pstats.Stats('profile_output.pstats')# # p.sort_stats('cumulative').print_stats(10) # 按累积时间排序,打印前10行
cProfile

的输出结果看起来可能有点密密麻麻,但它包含了非常重要的信息,能让你一眼看出哪些函数是“时间大户”。

为什么

time.perf_counter()

time.time()

更适合代码计时?

说实话,我以前也习惯用

time.time()

来测量代码执行时间,毕竟它写起来最简单。但后来我发现,当需要精确测量时,它常常会给我带来一些困惑。

time.time()

返回的是系统当前的“挂钟时间”(wall-clock time),也就是我们日常看到的时钟时间。这意味着它可能会受到系统时间调整、闰秒甚至用户手动修改时间的影响。想象一下,如果你的程序在运行过程中,系统时间突然被同步了一下,或者你无意中改了时间,那你的计时结果就完全不准了。

相比之下,

time.perf_counter()

提供的是一个高分辨率的、单调递增的计时器。所谓“单调递增”,就是它只会一直往前走,不会倒退,也不会因为系统时间被修改而跳变。这使得它非常适合测量时间间隔,因为它只关心起点和终点之间经过了多少个“滴答声”,而不在乎这些“滴答声”对应的是哪个具体的日期时间。对于代码性能分析来说,我们最关心的就是这段代码到底消耗了多少CPU周期或者实际运行了多久,而不是它在哪个具体时刻开始或结束的。所以,如果你想获得更可靠、更精确的计时结果,

time.perf_counter()

无疑是更好的选择。当然,外部因素,比如操作系统调度、其他进程的活动,依然会影响你的代码实际获得的CPU时间,所以多次运行取平均值或者最小值(取决于你关注的是最好情况还是平均情况)总是明智的。

timeit

模块如何避免外部干扰,确保测试结果的可靠性?

我个人觉得

timeit

模块是Python标准库里一个被低估的性能测试利器。它之所以能提供相对可靠的测试结果,主要有几个巧妙的设计。

首先,它在一个相对“干净”的环境中执行你的代码。当你使用

timeit.timeit()

timeit.Timer

时,你可以通过

setup

参数来导入模块或定义变量。这些设置代码会在每次计时循环开始前执行一次,但不会被计入你的目标代码的执行时间。这意味着你的测试代码不会受到全局命名空间中可能存在的其他变量或函数的影响,也不会因为重复导入模块而产生额外的开销。它就像在一个临时的、隔离的沙盒里运行你的代码片段。

其次,也是最关键的,

timeit

会重复执行你的代码很多次(由

number

参数控制),并且整个测试过程还会重复多次(由

repeat

参数控制)。然后,它会给你返回一个包含多次重复测试结果的列表。通常,我们会取这个列表中的最小值。为什么取最小值而不是平均值?因为我们假设代码的“真实”性能是最好的那个值,而任何高于这个值的测量结果都可能是由外部干扰(比如操作系统调度、垃圾回收、其他进程的短暂活动)造成的。通过多次重复运行并取最小值,

timeit

能最大限度地减少这些随机、偶发的外部干扰对测试结果的影响,让你更接近代码本身的理论性能极限。

此外,

timeit

还会尝试禁用垃圾回收机制(如果可能的话),以防止垃圾回收在测试过程中突然介入,从而影响单次执行的时间。这样,每次代码片段的执行都能在一个相对一致的、没有GC干扰的环境中进行。这些机制共同作用,使得

timeit

成为一个非常适合对小段代码进行精确、可重复性能比较的工具。

cProfile

的输出结果中,

tottime

cumtime

分别代表什么?如何利用它们定位问题?

说实话,

cProfile

的原始输出有时候让我有点头疼,因为信息量真的很大,密密麻麻的文本列表。但一旦你理解了其中的关键列,它就成了定位性能瓶颈的绝佳工具。在

cProfile

的输出中,有几列是至关重要的:

ncalls

(number of calls):这很简单,就是函数被调用的次数。如果一个函数被调用了上万次,即使它每次执行都很快,累积起来也可能成为问题。

tottime

(total time):这是函数“自身”执行所花费的总时间,不包括它所调用的子函数的时间。换句话说,它衡量的是函数内部逻辑的执行效率。如果你看到一个函数的

tottime

很高,那就意味着这个函数本身的代码逻辑效率低下,或者它内部有大量的计算/IO操作,是时候深入检查这个函数了。

percall

(tottime / ncalls):这是函数每次调用的平均自身耗时。通过这个值,你可以判断函数单次执行的效率。

cumtime

(cumulative time):这是函数及其所有子函数(它调用的所有函数)执行所花费的总时间。它衡量的是从函数被调用开始,到它最终返回为止,整个调用链条所花费的总时间。如果一个函数的

cumtime

很高,可能不是它自身慢,而是它调用了一个或多个非常慢的子函数。

percall

(cumtime / ncalls):这是函数每次调用的平均累积耗时。

如何利用它们定位问题?

我通常会这样分析:

首先看

cumtime

最高的函数:这通常会告诉我整个程序中最“重”的环节。一个函数的

cumtime

高,意味着它或它的某个子函数是整个流程中最耗时的部分。

如果

cumtime

高,并且它的

tottime

也高,那么恭喜你,你找到了一个“自身就很慢”的函数,它的内部逻辑需要优化。如果

cumtime

高,但

tottime

相对较低,这意味着这个函数本身执行得很快,但它调用了其他耗时很长的子函数。这时,你需要顺着调用链条,深入到它所调用的子函数中去寻找真正的瓶颈。

接着看

tottime

最高的函数:这能直接找出那些“干活最多”或者“效率最低”的函数。即使它的

cumtime

不高(因为它可能没有调用其他函数,或者调用的子函数都很快),但如果它自身的

tottime

很高,那它就是你优化的重点。

注意

ncalls

:如果一个函数

tottime

cumtime

都不算特别高,但

ncalls

异常高,那么即使它单次执行很快,累积起来也可能成为问题。这种情况下,你可能需要考虑减少这个函数的调用次数,或者寻找一个可以批量处理的替代方案。

举个例子,假设你有一个函数

process_data()

,它调用了

read_file()

transform_data()

如果

read_file()

耗时很长(比如读取大文件),那么

read_file()

tottime

会很高,而

process_data()

cumtime

也会很高(因为它包含了

read_file()

的时间),但

process_data()

自身的

tottime

可能很低。这时,瓶颈在

read_file()

。如果

transform_data()

里面有复杂的循环计算,那么

transform_data()

tottime

会很高,

process_data()

cumtime

也会很高,但

process_data()

自身的

tottime

可能很低。这时,瓶颈在

transform_data()

通过这种方式,你可以像侦探一样,一步步地缩小范围,最终定位到代码中真正需要优化的地方。这比盲目地猜测或优化那些看起来“复杂”但实际不耗时的代码要有效得多。

以上就是Python怎么测量代码的执行时间_Python代码性能计时与分析方法的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1372009.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年12月14日 11:57:25
下一篇 2025年12月14日 11:57:35

相关推荐

  • Golang如何安全地处理用户上传文件 防范路径遍历与恶意内容

    处理用户上传文件需遵循四个安全措施:1.限制存储路径,使用固定目录并校验路径合法性;2.验证文件类型,采用白名单机制并检查文件头;3.限制文件大小与并发,设置请求体上限;4.隔离或转换上传文件,禁用直接访问。具体做法包括使用filepath.clean()清理路径、通过strings.haspref…

    2025年12月15日 好文分享
    000
  • Golang表格驱动测试如何实现 展示参数化测试的编写技巧

    表格驱动测试在golang中是一种高效且优雅的参数化测试实现方式,其核心在于将输入参数、预期输出和测试条件封装在结构体中,通过迭代执行测试用例提升代码可读性、可维护性和覆盖率。具体步骤包括:1. 定义测试用例结构体;2. 创建包含多个测试用例的切片;3. 使用t.run遍历用例并执行子测试。该方法优…

    2025年12月15日 好文分享
    000
  • Golang微服务如何测试 单元测试与集成测试策略

    单元测试验证函数逻辑,集成测试检查服务协作。单元测试使用testing库编写测试用例,通过interface mock外部依赖,关注核心逻辑覆盖率;集成测试准备真实环境,测试端到端流程,使用testmain初始化资源并确保测试无副作用;测试代码应与源码同目录,按功能命名文件,并区分单元与集成测试的命…

    2025年12月15日 好文分享
    000
  • Go语言编译器的实现语言解析与演进

    Go语言本身并非由某种语言“写成”,而是由形式文法定义。然而,其编译器作为程序,则必须使用特定编程语言实现。本文深入探讨了Go语言主要编译器gc和gccgo的实现语言:gc最初用C语言编写,现已实现自举,完全由Go语言自身编写;而gccgo作为GCC前端,则主要使用C++。文章阐明了编程语言与编译器…

    2025年12月15日
    000
  • 如何在Golang中用反射创建新实例 详解New和Zero的适用场景

    在golang中,reflect.new用于创建可修改的指针实例,适合构造对象并赋值或调用方法;reflect.zero返回不可修改的零值,适用于比较或默认值场景。1. reflect.new分配新内存并返回指针类型的value,可用于结构体初始化、字段填充及方法调用;2. reflect.zero…

    2025年12月15日 好文分享
    000
  • Golang的net/http库如何使用 详解HTTP服务器与客户端的创建方法

    golang的net/http库提供了创建http服务器和客户端的核心功能,支持路由定义、请求处理、客户端请求发送及响应解析,并具备性能优化与安全机制。1. 创建http服务器需注册路由与处理函数,并通过http.server配置超时等参数启动监听;2. http客户端可通过http.get、htt…

    2025年12月15日 好文分享
    000
  • 怎样用Golang测试加密算法 讲解测试随机性与安全性的特殊考虑

    编写 golang 加密算法测试时,需特别关注随机性和安全性。一、随机性测试:使用 crypto/rand 生成安全随机数,避免 math/rand;多次运行测试检查输出分布是否均匀,确保低重复率;不要硬编码随机种子以保证真实环境行为。二、安全性测试:处理输入边界,如空密钥、超长明文等异常情况;验证…

    2025年12月15日 好文分享
    000
  • Golang的反射替代方案有哪些 对比代码生成与接口调用的性能

    go语言中提升反射性能的方法有代码生成和接口调用。代码生成利用静态类型在编译期生成特定逻辑,性能接近手写代码,适合orm、序列化工具等场景;接口调用通过实现多态平衡灵活性与性能,适合插件系统、策略模式;两者相比反射性能优势明显,应优先选用。 Golang 的反射机制虽然强大,但性能开销较大,尤其在高…

    2025年12月15日 好文分享
    000
  • 怎样优化Golang的并发安全map 对比sync.Map与分片锁方案

    选择golang并发安全map需根据业务场景权衡性能与实现复杂度。sync.map适用于读多写少、无需遍历的场景,如缓存和配置管理;分片锁适合高频写入、需自定义逻辑的场景,通过哈希分片减少锁竞争。优化建议包括合理设置分片数、使用rwmutex、结合pprof压测分析性能瓶颈。最终应以实际压测结果为准…

    2025年12月15日 好文分享
    000
  • Golang的runtime/debug如何诊断内存问题 使用FreeOSMemory实战技巧

    调用 debug.freeosmemory() 适合在完成大规模内存操作后释放未使用内存。其作用是建议运行时将空闲内存归还操作系统,适用于处理完临时数据、执行内存密集型任务后或长时间等待前;实战中应配合 pprof 工具分析堆内存,通过 readmemstats 监控内存变化并在必要时手动释放;注意…

    2025年12月15日 好文分享
    000
  • Golang的RPC性能如何优化 深入分析gRPC连接池与负载均衡配置

    优化golang中grpc性能的核心在于复用clientconn实例、配置客户端负载均衡策略,并结合服务发现机制实现智能请求分发。1. 复用grpc.clientconn,避免频繁创建连接带来的tcp和tls开销;2. 启用客户端负载均衡(如round_robin),通过resolver获取后端地址…

    2025年12月15日 好文分享
    000
  • Golang如何优化编译速度 分析依赖管理与增量编译方案

    优化golang编译速度的核心在于依赖管理和增量编译机制的高效利用。1. 通过go mod vendor固化依赖,提升ci/cd稳定性并减少网络i/o;2. 利用gocache实现编译缓存,避免重复编译;3. 优化项目结构,拆分模块、使用接口解耦、消除循环依赖;4. 在docker构建和ci/cd中…

    2025年12月15日 好文分享
    000
  • GolangWeb安全防护进阶技巧 防范SQL注入与参数篡改攻击

    要有效保护golang web应用,需从防御sql注入、参数篡改等多个层面建立完整安全体系。1. 防御sql注入应使用参数化查询或预编译语句,通过database/sql包的prepare和query方法确保输入被视为数据而非可执行代码;2. 输入验证与过滤作为辅助手段,例如移除html标签和转义特…

    2025年12月15日 好文分享
    000
  • Golang的逃逸分析原理与内存优化

    golang的逃逸分析决定了变量在堆还是栈上分配,影响程序性能。其核心在于编译器判断变量生命周期是否超出作用域:若变量在函数返回后仍被引用或大小不确定,则逃逸到堆。1. 通过go build -gcflags ‘-m’可查看逃逸结果;2. 常见逃逸场景包括返回指针、inter…

    2025年12月15日 好文分享
    000
  • 如何提升Golang模板渲染效率 解析text/template的预编译技巧

    预编译模板可提升golang中text/template的渲染效率。1. 程序启动时一次性加载模板,使用template.must(template.parsefiles())存储到全局变量,后续直接调用execute避免重复解析;2. 使用template.parseglob一次性加载多个模板,简…

    2025年12月15日 好文分享
    000
  • 怎样实现GolangWebSocket服务 使用gorilla/websocket实战案例

    实现 websocket 服务的关键在于使用 gorilla/websocket 库完成连接升级与消息处理。具体步骤如下:1. 安装依赖 go get github.com/gorilla/websocket;2. 编写服务端代码,定义 upgrader 实例并设置 /ws 路由,通过 handle…

    2025年12月15日 好文分享
    000
  • Golang的json库有哪些高效用法 解析Marshal与Unmarshal技巧

    golang的encoding/json库通过marshal和unmarshal实现高效json编解码。1. 使用合适的数据类型与结构体标签(如json:”name”、omitempty)提升性能;2. 避免循环引用并预先分配内存缓冲;3. unmarshal时优先使用结构体…

    2025年12月15日 好文分享
    000
  • Go 语言在 Windows 平台上的编译与部署指南

    本文旨在为Go语言开发者提供在Windows平台上进行程序编译与部署的详细指南。尽管Go语言早期在Windows上的支持尚处于实验阶段,但随着持续的官方开发和优化,其在Windows环境下的兼容性与性能已达到生产级别。文章将涵盖Go环境的搭建、基础程序的编写与编译流程,旨在帮助读者高效地在Windo…

    2025年12月15日
    000
  • Go语言在Windows环境下的编译与Python集成策略

    本文详细介绍了Go语言在Windows环境下的编译与运行方法,纠正了Go不支持Windows的常见误解。同时,深入探讨了Python与Go程序之间进行通信和集成的多种策略,包括API调用、RPC框架和共享库等,为开发者提供了实用的技术指南。 1. Go语言在Windows环境下的编译与运行 关于go…

    2025年12月15日
    000
  • 深入解析Go语言编译器的实现语言与演进

    Go语言本身并非用某种语言“写成”,而是通过形式文法定义。然而,Go语言的编译器作为程序,则必须用特定编程语言实现。Go拥有两个主要编译器:官方的gc和基于GCC的gccgo。gc最初由C语言编写,现已完全用Go语言自身实现,实现了自举;而gccgo则主要由C++编写。此外,Go的标准库绝大部分都是…

    2025年12月15日
    000

发表回复

登录后才能评论
关注微信