草庐IT

memory-profiling

全部标签

python - 通过 f2py : How to profile? 对 Python 的 Fortran 扩展

我正在使用通过f2py(第2版)编译的Fortran(gfortran4.4.7)编写的Python(2.7.2)扩展。我可以使用cProfile分析Python部分,但结果没有提供有关Fortran函数的任何信息。相反,时间归因于调用Fortran函数的Python函数。我已经为我构建的所有Fortran对象启用了“-pg-O”标志,并在f2py调用中通过以下方式创建了共享对象:f2py--opt="-pg-O"...非常感谢任何有关如何获取Fortran信息的提示。如果有人使用类似的设置,使用不同的分析器,我也会感兴趣。 最佳答案

python - 范恩错误 11 : Unable to allocate memory

在FANN的Python实现中,我得到了这个错误frompyfannimportlibfannann=libfann.neural_net()ann.create_standard(4,2,8,9,1)#FANNError11:Unabletoallocatememory.有什么建议吗? 最佳答案 create_standard和其他简单创建有一个错误。解决方法是ann.create_standard_array([2,8,9,1])create_sparse和create_shortcut相同。

python - 假脱机临时文件 : units of maximum (in-memory) size?

tempfile.SpooledTemporaryFile()的参数max_size是内存中可以容纳的临时文件的最大大小(在溢出到磁盘之前)。这个参数的单位是什么(字节?千字节?)?文档(Python2.7和Python3.4)没有说明这一点。 最佳答案 大小以字节为单位。来自SpooledTemporaryFile()sourcecode:def_check(self,file):ifself._rolled:returnmax_size=self._max_sizeifmax_sizeandfile.tell()>max_siz

python - psutil.Process.get_memory_info中RSS的单位是什么?

当我使用ps-opid,rss-p1时,我看到以下内容:PIDRSS1784但是当我使用psutil查询rss时,我得到了不同的值:>>>p=psutil.Process(1)>>>printp.get_memory_info().rss802816psutil是否有可能使用不同的单位?我在documentation中找不到任何相关信息. 最佳答案 ps的输出以千字节为单位。psutil的RSS(驻留集大小)以字节为单位。>>>802816/7841024来自manps:rssRSSresidentsetsize,thenon-sw

python - InMemoryUploadedFile 真的是 "in memory"吗?

我知道打开一个文件只会创建一个文件处理程序,无论文件大小如何,它都会占用固定的内存。Django有一个名为InMemoryUploadedFile的类型,它表示通过表单上传的文件。我像这样在DjangoView中获取我的文件对象的句柄:file_object=request.FILES["uploadedfile"]此file_object的类型为InMemoryUploadedFile。现在我们可以自己看到,file_object有方法.read()用于将文件读入内存。bytes=file_object.read()类型InMemoryUploadedFile的file_object

python - numpy.shares_memory 和 numpy.may_share_memory 有什么区别?

为什么numpy.may_share_memory存在?给出准确结果的挑战是什么?numpy.may_share_memory方法是否已弃用?numpy.may_share_memory可能会给出误报,但不会给出漏报。numpy.shares_memory是否没有给出任何误报也没有任何漏报?我使用numpy版本1.11.2。参见:numpy.may_share_memorynumpy.shares_memoryversion1.11.2sourceongithub 最佳答案 引用releasenotesfor1.11.0:Anewf

Python Line_profiler 和 Cython 函数

所以我尝试使用line_profiler在我自己的python脚本中分析一个函数,因为我想要逐行计时。唯一的问题是该函数是Cython函数,并且line_profiler无法正常工作。在第一次运行时,它只是因错误而崩溃。然后我添加了!pythoncython:profile=Truecython:linetrace=Truecython:binding=True在我的脚本的顶部,现在它运行正常,除了时间和统计数据是空白的!有没有办法将line_profiler与Cythonized函数一起使用?我可以分析非Cythonized函数,但它比Cythonized慢得多,以至于我无法使用来自

java - Selenium : How to stop geckodriver process impacting PC memory, 没有调用 driver.quit()?

有一个测试,类似于:import//neededimportspublicclassTestClass{WebDriverdriver;@BeforepublicvoidsetUp(){//somecode}@Testpublicvoidtest1(){//somecode,includinginitofdriver(geckodriver)}//@After//publicvoidtearDown(){//driver.quit();//}}因此,我启动了geckodriver,并使用firefox实例成功运行了我的测试。但我不想在每次运行后关闭firefox窗口,因为我只想分析我拥

python - "pip install line_profiler"失败

我打字sudopipinstall"line_profiler"我明白了Downloading/unpackingline-profilerCouldnotfindaversionthatsatisfiestherequirementline-profiler(fromversions:1.0b1,1.0b2,1.0b3)Cleaningup...Nodistributionsmatchingtheversionforline-profilerStoringdebuglogforfailurein/home/milia/.pip/pip.log当我使用搜索line_profile时su

python - 了解 Python 3.8 中的 shared_memory

我正在尝试理解shared_memory的一些操作。查看source,看起来该模块在UNIX环境中使用shm_open(),在Windows上使用CreateFileMapping\OpenFileMapping,并结合mmap.我从here了解到,为了避免pickle进行彻底的序列化/反序列化,需要为他的共享显式实现__setstate__()和__getstate__()数据类型。我在shared_memory.py中没有看到任何这样的实现。shared_memory如何绕过pickle处理?此外,在Windows机器上,仅此一项似乎就可以跨解释器生存:frommmapimport