草庐IT

process_output

全部标签

python - django,fastcgi : how to manage a long running process?

我继承了一个django+fastcgi应用程序,需要对其进行修改以执行冗长的计算(最多半小时或更长时间)。我想做的是在后台运行计算并返回“你的工作已经开始”类型的响应。当进程正在运行时,进一步点击url应该返回“您的作业仍在运行”,直到作业完成,此时应该返回作业的结果。对url的任何后续命中都应返回缓存的结果。我是django的完全新手,十年来没有做过任何重要的网络工作,所以我不知道是否有内置的方法来做我想做的事情。我已经尝试通过subprocess.Popen()启动进程,除了它在进程表中留下一个失效条目之外,它工作正常。我需要一个干净的解决方案,可以在它完成后删除临时文件和进程的

python - pydata 火焰 : does it allow parallel processing or not?

我希望并行化numpy或pandas操作。为此,我一直在研究pydata的blaze。.我的理解是无缝并行化是它的主要卖点。不幸的是,我一直无法找到运行在多个内核上的操作。blaze中的并行处理是否可用或目前只是一个既定目标?难道我做错了什么?我正在使用blazev0.6.5。我希望并行化的一个函数示例:(pytables列的重复数据删除太大而无法放入内存)importpandasaspdimportblazeasbzdeff1():counter=0groups=pd.DataFrame(columns=['name'])t=bz.TableSymbol('t','{name:str

Python - Multiprocessing.processes 从可执行文件运行时成为主进程的副本

我刚刚在我的程序中发现了一个与使用Python的多处理模块有关的奇怪错误。当我在我的机器上从源代码运行程序时,一切正常。但是我一直在使用pyinstaller将它构建成一个可执行文件,并且由于某种原因,当我运行从我的代码构建的可执行文件时,多处理的行为发生了巨大的变化。具体来说,当我尝试运行我的代码的多处理部分,而不是做它应该做的事情时,会弹出一个似乎是我的程序主窗口的副本,每个进程一个。更糟糕的是,如果手动关闭它们,它们会重新打开,大概是因为它们是multiprocessing.pool的一部分。不会打印任何错误消息,一旦创建所有窗口,它们就坐在那里什么也不做。是什么原因导致的?

Python anaconda conda 问题 : updating anaconda package impossible because processes are running

我在使用conda更新anaconda的包时遇到问题。当我进行condaupdate--all时,有一个问题对我说:Error:Unabletoremovefilesforpackage:cryptographyPleasecloseallprocessesrunningcodefromcryptographyandtryagain.但是,没有进程在运行,我只是打开了cmd窗口。例如,当我想要更新dateutile时,情况相同。就像conda使用了一些包然后我无法更新它们一样?有人知道关闭或删除这些软件包以重新安装它们的方法吗?信息:C:\Anaconda3\Scripts>conda

Python、Scrapy、管道 : function "process_item" not getting called

我有一个非常简单的代码,如下所示。抓取没问题,我可以看到所有生成正确数据的print语句。在Pipeline中,初始化工作正常。但是,process_item函数不会被调用,因为函数开头的print语句永远不会执行。蜘蛛:comosham.pyimportscrapyfromscrapy.spiderimportSpiderfromscrapy.selectorimportSelectorfromscrapy.httpimportRequestfromactivityadvisor.itemsimportComoShamLocationfromactivityadvisor.items

python 素数处理 : processing pool is slower?

所以最近几天我一直在摆弄python的多处理库,我真的很喜欢处理池。它很容易实现,我可以想象出很多用途。我已经完成了几个我以前听说过的项目来熟悉它,最近完成了一个暴力破解刽子手游戏的程序。任何人,我正在做一个执行时间比较,对单线程和处理池中100万到200万之间的所有素数求和。现在,对于hangmancruncher来说,将游戏放在处理池中可以将执行时间提高大约8倍(i7具有8个内核),但是当磨掉这些素数时,它实际上增加处理时间几乎是4倍。谁能告诉我这是为什么?这是供有兴趣查看或测试它的任何人使用的代码:#!/user/bin/python.exeimportmathfrommulti

python - python中的check_output错误

运行以下代码时出现错误。#!/usr/bin/pythonimportsubprocessimportosdefcheck_output(*popenargs,**kwargs):process=subprocess.Popen(stdout=subprocess.PIPE,*popenargs,**kwargs)output,unused_err=process.communicate()retcode=process.poll()ifretcode:cmd=kwargs.get("args")ifcmdisNone:cmd=popenargs[0]error=subprocess.

python - 这是什么(cid :51) in the output of pdf2txt?

所以我想从pdf文件中提取文本,我需要它的位置、宽度、高度、字体。我已经尝试了很多,但最有用和最完整的解决方案看起来是PDFMiner,在这种情况下,更准确地说是pdf2txt.py.我已经按照文档和示例进行操作,并尝试使用以下命令从我的pdf中提取文本了解更多:pdf2txt.py-Ynormal-txml-obuttons.xmlbuttons.pdf输出buttons.xml如下所示:(cid:51)(cid:76)(cid:72)(cid:89)(cid:85)(cid:3)(cid:52)(cid:86)(cid:89)(cid:76)第一个字符应该是L和51(cid:51)

python - 获取 IOError : [Errno Input overflowed] -9981 when setting PyAudio Stream input and output to True

我正在尝试在我的Mac(OS10.7.2)上运行以下代码(来自PyAudio文档的示例):importpyaudioimportsyschunk=1024FORMAT=pyaudio.paInt16CHANNELS=1RATE=44100RECORD_SECONDS=5p=pyaudio.PyAudio()stream=p.open(format=FORMAT,channels=CHANNELS,rate=RATE,input=True,output=True,frames_per_buffer=chunk)print"*recording"foriinrange(0,44100/ch

python - 如何在 Python 中为类类型应用 SWIG OUTPUT 类型映射?

我在使用SWIG(版本3.0.6)围绕C++库生成Python包装器时遇到了一些问题。我的问题与应用OUTPUT类型映射有关,特别是在类类型的指针/引用的情况下。为了说明,这就是我想要的标准类型,并且它有效://.hintadd(constlongarg1,constlongarg2,long&resultLong);//interface.i%applylong&OUTPUT{long&resultLong};intadd(constlongarg1,constlongarg2,long&resultLong);//projectWrapper.pydefadd(arg1,arg2)