我正在运行一个远程命令:
ssh = paramiko.SSHClient()
ssh.connect(host)
stdin, stdout, stderr = ssh.exec_command(cmd)
现在我想得到输出。我见过这样的事情:
# Wait for the command to finish
while not stdout.channel.exit_status_ready():
if stdout.channel.recv_ready():
stdoutLines = stdout.readlines()
但有时似乎永远不会运行 readlines()(即使标准输出上应该有数据)。这对我来说似乎意味着 stdout.channel.recv_ready() 不一定准备好(真)只要 stdout.channel.exit_status_ready() 为真。
像这样合适吗?
# Wait until the data is available
while not stdout.channel.recv_ready():
pass
stdoutLines = stdout.readlines()
也就是说,在等待 recv_ready() 说数据准备好之前,我真的必须首先检查退出状态吗?
在无限循环中等待 stdout.channel.recv_ready() 变为 True 之前,我怎么知道 stdout 上是否应该有数据(如果不应该有任何 stdout 输出,它就不会)?
最佳答案
也就是说,在等待 recv_ready() 说数据准备好之前,我真的必须先检查退出状态吗?
没有。从远程进程接收数据(例如 stdout/stderr)是完全没问题的,即使它还没有完成。此外,一些 sshd 实现甚至不提供远程过程的退出状态,在这种情况下您会遇到问题,请参见 paramiko doc: exit_status_ready .
为短期远程命令等待 exit_status_code 的问题是您的本地线程可能比您检查循环条件更快地接收到 exit_code。在这种情况下,您将永远不会进入循环,并且永远不会调用 readlines() 。这是一个例子:
# spawns new thread to communicate with remote
# executes whoami which exits pretty fast
stdin, stdout, stderr = ssh.exec_command("whoami")
time.sleep(5) # main thread waits 5 seconds
# command already finished, exit code already received
# and set by the exec_command thread.
# therefore the loop condition is not met
# as exit_status_ready() already returns True
# (remember, remote command already exited and was handled by a different thread)
while not stdout.channel.exit_status_ready():
if stdout.channel.recv_ready():
stdoutLines = stdout.readlines()
在无限循环中等待 stdout.channel.recv_ready() 变为 True 之前,我怎么知道 stdout 上是否应该有数据(如果不应该有任何标准输出输出,它不会)?
channel.recv_ready()只是表示缓冲区中有未读数据。
def recv_ready(self): """ Returns true if data is buffered and ready to be read from this channel. A ``False`` result does not mean that the channel has closed; it means you may need to wait before more data arrives.
这意味着可能由于网络(延迟数据包、重传等)或只是您的远程进程未定期写入 stdout/stderr 可能导致 recv_ready 为 False。因此,将 recv_ready() 作为循环条件可能会导致您的代码过早返回,因为它有时会产生 True 完全没问题(当远程进程写入 stdout 并且您的本地 channel 线程收到输出),有时在一次迭代中产生错误(例如,您的远程过程正在休眠而不写入标准输出)。
除此之外,人们偶尔会遇到可能与 stdout/stderr 有关的 paramiko 挂起 buffers filling up (pot. 与 Popen 和挂起过程的问题有关,当您从未从 stdout/stderr 读取并且内部缓冲区已满时)。
下面的代码实现了一个分 block 解决方案,以在 channel 打开时从 stdout/stderr 中读取清空缓冲区。
def myexec(ssh, cmd, timeout, want_exitcode=False):
# one channel per command
stdin, stdout, stderr = ssh.exec_command(cmd)
# get the shared channel for stdout/stderr/stdin
channel = stdout.channel
# we do not need stdin.
stdin.close()
# indicate that we're not going to write to that channel anymore
channel.shutdown_write()
# read stdout/stderr in order to prevent read block hangs
stdout_chunks = []
stdout_chunks.append(stdout.channel.recv(len(stdout.channel.in_buffer)))
# chunked read to prevent stalls
while not channel.closed or channel.recv_ready() or channel.recv_stderr_ready():
# stop if channel was closed prematurely, and there is no data in the buffers.
got_chunk = False
readq, _, _ = select.select([stdout.channel], [], [], timeout)
for c in readq:
if c.recv_ready():
stdout_chunks.append(stdout.channel.recv(len(c.in_buffer)))
got_chunk = True
if c.recv_stderr_ready():
# make sure to read stderr to prevent stall
stderr.channel.recv_stderr(len(c.in_stderr_buffer))
got_chunk = True
'''
1) make sure that there are at least 2 cycles with no data in the input buffers in order to not exit too early (i.e. cat on a >200k file).
2) if no data arrived in the last loop, check if we already received the exit code
3) check if input buffers are empty
4) exit the loop
'''
if not got_chunk \
and stdout.channel.exit_status_ready() \
and not stderr.channel.recv_stderr_ready() \
and not stdout.channel.recv_ready():
# indicate that we're not going to read from this channel anymore
stdout.channel.shutdown_read()
# close the channel
stdout.channel.close()
break # exit as remote side is finished and our bufferes are empty
# close all the pseudofiles
stdout.close()
stderr.close()
if want_exitcode:
# exit code is always ready at this point
return (''.join(stdout_chunks), stdout.channel.recv_exit_status())
return ''.join(stdout_chunks)
channel.closed 只是 channel 过早关闭时的最终退出条件。读取 block 后,代码立即检查是否已收到 exit_status 并且同时没有缓冲新数据。如果有新数据到达或没有收到 exit_status,代码将继续尝试读取 block 。一旦远程 proc 退出并且缓冲区中没有新数据,我们假设我们已经读取了所有内容并开始关闭 channel 。请注意,如果您想接收退出状态,您应该始终等到它被接收到,否则 paramiko 可能会永远阻塞。
这样可以保证缓冲区不会填满并使您的进程挂起。 exec_command 仅在远程命令退出且本地缓冲区中没有数据时返回。通过使用 select() 而不是在繁忙的循环中进行轮询,该代码对 cpu 也更加友好,但对于短期命令来说可能会慢一些。
仅供引用,为了防止一些无限循环,可以设置一个 channel 超时,当一段时间内没有数据到达时触发
chan.settimeout(timeout)
chan.exec_command(command)
关于python - 如果要检查 recv_ready(),是否必须检查 exit_status_ready?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/23504126/
关闭。这个问题是opinion-based.它目前不接受答案。想要改进这个问题?更新问题,以便editingthispost可以用事实和引用来回答它.关闭4年前。Improvethisquestion我想在固定时间创建一系列低音和高音调的哔哔声。例如:在150毫秒时发出高音调的蜂鸣声在151毫秒时发出低音调的蜂鸣声200毫秒时发出低音调的蜂鸣声250毫秒的高音调蜂鸣声有没有办法在Ruby或Python中做到这一点?我真的不在乎输出编码是什么(.wav、.mp3、.ogg等等),但我确实想创建一个输出文件。
给定这段代码defcreate@upgrades=User.update_all(["role=?","upgraded"],:id=>params[:upgrade])redirect_toadmin_upgrades_path,:notice=>"Successfullyupgradeduser."end我如何在该操作中实际验证它们是否已保存或未重定向到适当的页面和消息? 最佳答案 在Rails3中,update_all不返回任何有意义的信息,除了已更新的记录数(这可能取决于您的DBMS是否返回该信息)。http://ar.ru
我希望我的UserPrice模型的属性在它们为空或不验证数值时默认为0。这些属性是tax_rate、shipping_cost和price。classCreateUserPrices8,:scale=>2t.decimal:tax_rate,:precision=>8,:scale=>2t.decimal:shipping_cost,:precision=>8,:scale=>2endendend起初,我将所有3列的:default=>0放在表格中,但我不想要这样,因为它已经填充了字段,我想使用占位符。这是我的UserPrice模型:classUserPrice回答before_val
为了将Cucumber用于命令行脚本,我按照提供的说明安装了arubagem。它在我的Gemfile中,我可以验证是否安装了正确的版本并且我已经包含了require'aruba/cucumber'在'features/env.rb'中为了确保它能正常工作,我写了以下场景:@announceScenario:Testingcucumber/arubaGivenablankslateThentheoutputfrom"ls-la"shouldcontain"drw"假设事情应该失败。它确实失败了,但失败的原因是错误的:@announceScenario:Testingcucumber/ar
这个问题在这里已经有了答案:Checktoseeifanarrayisalreadysorted?(8个答案)关闭9年前。我只是想知道是否有办法检查数组是否在增加?这是我的解决方案,但我正在寻找更漂亮的方法:n=-1@arr.flatten.each{|e|returnfalseife
我不确定传递给方法的对象的类型是否正确。我可能会将一个字符串传递给一个只能处理整数的函数。某种运行时保证怎么样?我看不到比以下更好的选择:defsomeFixNumMangler(input)raise"wrongtype:integerrequired"unlessinput.class==FixNumother_stuffend有更好的选择吗? 最佳答案 使用Kernel#Integer在使用之前转换输入的方法。当无法以任何合理的方式将输入转换为整数时,它将引发ArgumentError。defmy_method(number)
如果您尝试在Ruby中的nil对象上调用方法,则会出现NoMethodError异常并显示消息:"undefinedmethod‘...’fornil:NilClass"然而,有一个tryRails中的方法,如果它被发送到一个nil对象,它只返回nil:require'rubygems'require'active_support/all'nil.try(:nonexisting_method)#noNoMethodErrorexceptionanymore那么try如何在内部工作以防止该异常? 最佳答案 像Ruby中的所有其他对象
我有一个这样的哈希数组:[{:foo=>2,:date=>Sat,01Sep2014},{:foo2=>2,:date=>Sat,02Sep2014},{:foo3=>3,:date=>Sat,01Sep2014},{:foo4=>4,:date=>Sat,03Sep2014},{:foo5=>5,:date=>Sat,02Sep2014}]如果:date相同,我想合并哈希值。我对上面数组的期望是:[{:foo=>2,:foo3=>3,:date=>Sat,01Sep2014},{:foo2=>2,:foo5=>5:date=>Sat,02Sep2014},{:foo4=>4,:dat
我有一个包含多个键的散列和一个字符串,该字符串不包含散列中的任何键或包含一个键。h={"k1"=>"v1","k2"=>"v2","k3"=>"v3"}s="thisisanexamplestringthatmightoccurwithakeysomewhereinthestringk1(withspecialcharacterslike(^&*$#@!^&&*))"检查s是否包含h中的任何键的最佳方法是什么,如果包含,则返回它包含的键的值?例如,对于上面的h和s的例子,输出应该是v1。编辑:只有字符串是用户定义的。哈希将始终相同。 最佳答案
我需要检查DateTime是否采用有效的ISO8601格式。喜欢:#iso8601?我检查了ruby是否有特定方法,但没有找到。目前我正在使用date.iso8601==date来检查这个。有什么好的方法吗?编辑解释我的环境,并改变问题的范围。因此,我的项目将使用jsapiFullCalendar,这就是我需要iso8601字符串格式的原因。我想知道更好或正确的方法是什么,以正确的格式将日期保存在数据库中,或者让ActiveRecord完成它们的工作并在我需要时间信息时对其进行操作。 最佳答案 我不太明白你的问题。我假设您想检查