《Python高性能编程》——2.11 用dowser实时画出变量的实例

2.11 用dowser实时画出变量的实例

Robert Brewer的dowser可以在代码运行时钩入名字空间并通过CherryPy接口在一个Web服务器上提供一个实时的变量实例图。每个被追踪对象都有一个走势图,让你可以看到某个对象的数量是否在增长。这在分析长期运行的进程时很有用。

如果你有一个长期运行的进程且你预计程序的不同操作会带来不同的内存变化(比如你可能想对一台web服务器上传一些数据或跑一些复杂的查询),那么你可以实时确认这些变化,见图2-9。

要使用它,我们需要在Julia代码中加入辅助函数(例2-14)用来启动CherryPy服务器。

例2-14 在应用中启动dowser的辅助函数

def launch_memory_usage_server(port=8080):
    import cherrypy
    import dowser

    cherrypy.tree.mount(dowser.Root())
    cherrypy.config.update({
        'environment': 'embedded',
        'server.socket_port': port
    })

    cherrypy.engine.start()

在开始计算之前,我们需要首先启动CherryPy服务器,如例2-15所示。完成计算后,我们可以调用time.sleep维持控制台打开——这会让CheeryPy进程保持运行,让我们可以继续审查名字空间的状态。

例2-15 在正确的时机启动dowser,这会启动一个Web服务器

...
        for xcoord in x:
            zs.append(complex(xcoord, ycoord))
            cs.append(complex(c_real, c_imag))

    launch_memory_usage_server()

...
    output = calculate_z_serial_purepython(max_iterations, zs, cs)
...
    print "now waiting..."
while True:
    time.sleep(1)

点击图2-9中的TRACE链接,我们就可以看到每个list对象的内容(图2-10)。我们还可以继续深入每个list内部 ——这就像在IDE中使用一个交互调试器一样,但是你可以在一台服务器上进行而不需要一个IDE。

 备忘 

我们当然更希望在可控的情况下直接分析代码块。但是有时这不一定做得到,或者有时你只是想要简单地分析一下情况。查看一个正在运行的进程的内部细节会是一种折中的方案,不需要进行太多的工作就可以提供足够的证据。
时间: 2024-09-18 14:25:11

《Python高性能编程》——2.11 用dowser实时画出变量的实例的相关文章

《Python高性能编程》——导读

前 言 Python很容易学.你之所以阅读本书可能是因为你的代码现在能够正确运行,而你希望它能跑得更快.你可以很轻松地修改代码,反复地实现你的想法,你对这一点很满意.但能够轻松实现和代码跑得够快之间的取舍却是一个世人皆知且令人惋惜的现象.而这个问题其实是可以解决的. 有些人想要让顺序执行的过程跑得更快.有些人需要利用多核架构.集群,或者图形处理单元的优势来解决他们的问题.有些人需要可伸缩系统在保证可靠性的前提下酌情或根据资金多少处理更多或更少的工作.有些人意识到他们的编程技巧,通常是来自其他语言

《Python高性能编程》——第1章 理解高性能Python 1.1 基本的计算机系统

第1章 理解高性能Python 读完本章之后你将能够回答下列问题 计算机架构有哪些元素? 常见的计算机架构有哪些? 计算机架构在Python中的抽象表达是什么? 实现高性能Python代码的障碍在哪里? 性能问题有哪些种类? 计算机编程可以被认为是以特定的方式进行数据的移动和转换来得到某种结果.然而这些操作有时间上的开销.因此,高性能编程可以被认为是通过降低开销(比如撰写更高效的代码)或改变操作方式(比如寻找一种更合适的算法)来让这些操作的代价最小化. 数据的移动发生在实际的硬件上,我们可以通过

《Python高性能编程》——1.3 为什么使用Python

1.3 为什么使用Python Python具有高度的表现力且容易上手--新开发者会很快发现他们可以在很短时间里做到很多.许多Python库包含了用其他语言编写的工具,使Python可以轻易调用其他系统.比如,scikit-learn机器学习系统包含了LIBLINEAR和LIBSVM(两者皆以C语言写成),numpy库则包含了BLAS以及其他用C和Fortran语言写的库.因此,正确运用这些库的Python代码确实可以在速度上做到跟C媲美. Python被誉为"内含电池",因为它内建了

《Python高性能编程》——1.2 将基本的元素组装到一起

1.2 将基本的元素组装到一起 仅理解计算机的基本组成部分并不足以理解高性能编程的问题.所有这些组件的互动与合作还会引入新的复杂度.本段将研究一些样本问题,描述理想的解决方案以及Python如何实现它们. 警告:本段可能看上去让人绝望--大多数问题似乎都证明Python并不适合解决性能问题.这不是真的,原因有两点.首先,在所有这些"高性能计算要素"中,我们忽视了一个至关重要的要素:开发者.原生Python在性能上欠缺的功能会被迅速开发出来.另外,我们会在本书中介绍各种模块和原理来帮助减

《Python高性能编程》——第2章 通过性能分析找到瓶颈 2.1 高效地分析性能

第2章 通过性能分析找到瓶颈 读完本章之后你将能够回答下列问题 如何找到代码中速度和RAM的瓶颈? 如何分析CPU和内存使用情况? 我应该分析到什么深度? 如何分析一个长期运行的应用程序? 在CPython台面下发生了什么? 如何在调整性能的同时确保功能的正确? 性能分析帮助我们找到瓶颈,让我们在性能调优方面做到事半功倍.性能调优包括在速度上巨大的提升以及减少资源的占用,也就是说让你的代码能够跑得"足够快"以及"足够瘦".性能分析能够让你用最小的代价做出最实用的决定

《Python高性能编程》——2.9 用memory_profiler诊断内存的用量

2.9 用memory_profiler诊断内存的用量 和Rober Kern实现的line_profiler包测量CPU占用率类似,Fabian Pedregosa和Philippe Gervais实现的memory_profiler模块能够逐行测量内存占用率.了解代码的内存使用情况允许你问自己两个问题: 我们能不能重写这个函数让它使用更少的RAM来工作得更有效率? 我们能不能使用更多RAM缓存来节省CPU周期? memory_profiler的操作和line_profiler十分类似,但是运

《Python高性能编程》——2.8 用line_profiler进行逐行分析

2.8 用line_profiler进行逐行分析 根据Ian的观点,Robert Kern的line_profiler是调查Python的CPU密集型性能问题最强大的工具.它可以对函数进行逐行分析,你应该先用cProfile找到需要分析的函数,然后用line_profiler对函数进行分析. 当你修改你的代码时,值得打印出这个工具的输出以及代码的版本,这样你就拥有一个代码变化(无论有没有用)的记录,让你可以随时查阅.当你在进行逐行改变时,不要依赖你的记忆. 输入命令pip install lin

《Python高性能编程》——2.6 使用cProfile模块

2.6 使用cProfile模块 cProfile是一个标准库内建的分析工具.它钩入CPython的虚拟机来测量其每一个函数运行所花费的时间.这一技术会引入一个巨大的开销,但你会获得更多的信息.有时这些额外的信息会给你的代码带来令人惊讶的发现. cProfile是标准库内建的三个分析工具之一,另外两个是hotshot和profile.hotshot还处于实验阶段,profile则是原始的纯Python分析器.cProfile具有跟profile一样的接口,且是默认的分析工具.如果你对这些库的历史

《Python高性能编程》——2.12 用dis模块检查CPython字节码

2.12 用dis模块检查CPython字节码 到目前为止我们已经展示了很多测量Python代码开销的方法(包括CPU和RAM的开销).不过,我们还没有看到在底层虚拟机的字节码层面发生的事情.了解"台面下"发生的事情有助于在脑海中对运行慢的函数建立一个模型,并能帮助你编译你的代码.所以现在让我们来看一些字节码. dis模块让我们能够看到基于栈的CPython虚拟机中运行的字节码.在你的Python代码运行的时候,了解虚拟机中发生了什么可以帮助你了解为什么某些编码风格会比其他的更快.同时