草庐IT

并行机

全部标签

c# - 真正的并行下载

我正在使用这种方法进行并发下载。publicvoidDownloadConcurrent(ActionMethod){Action[]methodList=newAction[Concurent_Downloads];for(inti=0;i我正在尝试同时下载url,但事件下载次数始终是一个。就像所有的下载都会调用,但只有一个url会开始下载数据,而不是像所有的都会开始进行下载。我希望所有下载同时并行工作,但无法实现。更新:该方法使用队列,它正在下载不同的url,形成队列。 最佳答案 WebClient的实例成员不是线程安全的,因此

java - 并行从 Windows 共享目录读取文件

我有一台服务器,它从Windows共享目录读取文本文件列表,并在开始接受用户消息之前将其内容保存到数据库中。该服务器将同时在多台机器上运行。我看到当我在多台机器上运行服务器时,开始处理文件的服务器首先处理所有文件,其他服务器一直等待访问该目录中的文件。我的代码是这样做的-(由于安全政策无法发布代码)获取共享目录中所有文件的列表。按修改日期排序(保存时间序列数据)While(true)直到目录中存在更多文件获取列表中的第一个文件,并将其移动到InProgess文件夹中并读取将内容保存到数据库。将文件移动到存档目录。处理下一个文件。我看到当我在两台不同的机器上运行同一个程序时,其中一台首先

windows - 为 x64 和 x86(并行安装)构建 OpenSSL?

我在网上搜索构建OpenSSL的x86和x64版本,发现很多都和我有同样的问题。问题是DLL使用相同的目录和以32结尾的文件名。当DLL必须并排驻留时,如何为x64和x86构建OpenSSL? 最佳答案 下面的统一差异是为openssl-1.0.2h创建的,将允许使用visualstudio构建x86(win32)和x64(win64)版本而不会发生冲突。openssl中包含的构建说明没有任何变化,您只需运行perl配置、ms/do_xxx,然后进行构建,然后进行安装。您可以为x64和x86环境执行这些操作,而无需撤消先前构建中的任

windows - 并行执行shell进程

是否有工具可以在Windows批处理文件中并行执行多个进程?我发现了一些适用于Linux的有趣工具(parallel和PPSS),但是,我需要一个适用于Windows平台的工具。奖励:如果该工具还允许在多台机器之间以简单的方式分发进程,远程运行进程,那就太好了PsExec.例子:我想在下面的for循环中使用for%Fin(*.*)doprocessFile.exe%F有限数量的processFile.exe实例并行运行以利用多核CPU。 最佳答案 编辑-我修改了脚本以选择性地显示每个进程的输出这是一个native批处理解决方案,可以

windows - 在 r 中并行使用 wordnet(与 windows 7)

我正在尝试在Windows7计算机上使用R的wordnet包进行并行处理。具体来说,我正在尝试查找名词列表的同义词。我在下面制作了一些示例代码来展示我正在尝试做的事情,但它似乎并没有正确地并行执行。它正在启动worker,它正在计算其中一名worker,而不是其他worker。我在下面制作的列表的长度为4,每个插槽中有4个单词。我试图将列表除以可用核心数,并将列表的一个子集发送到每个核心。然后sapply函数获取4个词的同义词(在并行循环内)。我也试过用Snowfall做这个但是我无法导出字典(sfExport似乎没有这样做)。我没有在foreach循环中使用“.export”,因为它

windows - 如何并行运行批处理文件中的指令/命令?

如何并行运行批处理文件中的指令/命令?批处理文件内容:每行调用一个进程例如StartMyDay.Batcalldevenv.execallchrome.execallcommunicator.execallVirtualBox.exe 最佳答案 使用start命令,但如果需要,添加文件的路径。start""devenv.exestart""chrome.exestart""communicator.exestart""VirtualBox.exe 关于windows-如何并行运行批处理文

windows - Windows 集群上并行 Julia 代码的问题

我正在设置一个小型Windows集群来并行加速我的Julia代码(2x32核)。我有以下问题:有没有办法抑制在远程机器上加载模块(例如“使用PyPlot”)?在我的代码中,我使用我的工作站进行初始化和数据呈现,而集群用于繁重的计算,不需要PyPlot、Dataframes等。由于PyPlot(和任何其他包)无法通过提供以下错误消息来填充帮助数据库,远程机器上的代码加载更加烦人:(实际上每个工作人员都有很多错误)exceptionon:1:1ERROR:openingfileC:\Users\phlavenk\AppData\Local\Julia-0.3.6\bin/../share/

python - 识别处理器核心或工作人员 ID 并行 python

我正在并行运行进程,但需要为每个要写入的cpu进程创建一个数据库。我只想要与每台服务器上分配的cpu一样多的数据库,因此写入3个数据库的100个作业可以在之后合并。是否有我可以识别每个worker的workerID号或核心ID?defworkerProcess(job):ifworkerDBexist(r'c:\temp\db\'+workerid):##processjobintothisdatabaseelse:makeDB(r'c:\temp\db\'+workerid)##firsttimethis'worker/core'used,makeDBthenprocessimpor

windows - Windows 事件是顺序处理还是并行处理?

我一直认为应用程序事件队列中的事件是按顺序处理的,但由于在我的应用程序中存在一些难以解释的不当行为,我需要问:不同事件的事件处理程序是否会并行运行?我正在使用wxWidgets及其事件处理机制,以防万一;我也将多线程用于其他目的,有一个“主”线程和一个“工作”线程(wxThreadHelper),并且我的印象是通常的事件只能由-单-主线程处理-而且是单线程的。有人可以确认一种方式吗?编辑:我说的是Windows术语中的消息(WM_PAINT、WM_KEYDOWN等。),但由于wxWidgets命名约定(wxPaintEvent等),我谈到了事件。对困惑感到抱歉。事实上,我使用wxWid

windows - 你知道任何对并行化有良好支持的构建系统吗?

我正在寻找一个构建系统(在mswindows上工作),它可以很好地支持任务/目标(或你称之为的任何东西)的并行化。更具体地说-在构建期间(在MSWindows机器上启动)我需要将源文件复制到许多不同的机器(不一定运行Windows)并在每台机器上启动远程作业-我真的很喜欢一次在所有机器上执行此操作。有谁知道能够并行执行此类任务的构建系统。根据我的搜索,目前可用的选项是:-j在make中切换-但我不知道nmake是否支持这个-一些自定义nAnt任务-msbuild对并行化有某种形式的支持-看起来与make类似(这意味着您不指定要并行执行的操作,只需指定以这种方式构建东西会很好)-fake