草庐IT

python - 在 Windows 上,python 启动器 'py' 做什么让 control-C 在进程组之间交叉?

coder 2024-06-06 原文

对,这非常晦涩...

因此在 Windows 上,当您按下 control-C 来中断控制台程序时,这会向进程发送一个 CTRL_C_EVENT。您也可以通过 GenerateConsoleCtrlEvent 手动执行此操作.在 Python 中,os.kill 充当 C 级 GenerateConsoleCtrlEvent 的包装器,并允许我们通过以下方式向当前进程发送 CTRL_C_EVENT做:

os.kill(os.getpid(), signal.CTRL_C_EVENT)

但是,这不仅适用于当前流程——它实际上适用于该流程所属的整个“流程组”。

我有一个测试套件,它调用 os.kill 就像您在上面看到的那样,作为一些测试的一部分,以确保我的程序的 control-C 处理正常工作。但是,当在 appveyor 上运行这个测试套件时,这会导致问题,因为显然 appveyor 的一些基础设施在同一个“进度组”中并且被破坏了。

解决方案是我们需要生成带有 CREATE_NEW_PROCESS_GROUP 标志集的测试套件,这样它的 CTRL_C_EVENT 就不会“泄漏”给父级。这很容易做到。但是...

如果我使用 CREATE_NEW_PROCESS_GROUP 并使用 python whatever.py 运行子脚本,那么它会按预期工作:CTRL_C_EVENT 仅限于 child 。

如果我使用 CREATE_NEW_PROCESS_GROUP 并使用 py whatever.py 运行子脚本(即使用 python launcher ,这应该等同于运行 python 直接),那么 CREATE_NEW_PROCESS_GROUP 似乎没有任何效果:CTRL_C_EVENT 也会影响父级!

这是一个最小的示例程序,它仅对自身使用 os.kill 然后检查它是否有效(小问题:CREATE_NEW_PROCESS_GROUP 设置 CTRL_C_EVENT在子进程中被忽略,所以这里有一些绒毛使用 SetConsoleCtrlHandler 取消忽略它): https://github.com/njsmith/appveyor-ctrl-c-test/blob/master/a.py

这是我用来运行上述程序的包装器脚本: https://github.com/njsmith/appveyor-ctrl-c-test/blob/master/run-a.py

如果包装器脚本运行 python a.py,那么一切正常。如果包装器脚本运行 py a.py,则包装器脚本会收到一个 KeyboardInterrupt

所以我的问题是:这到底是怎么回事? py 启动器与 python 有何不同导致 CTRL_C_EVENT“泄漏”到父进程中,即使它在不同的进程中团体?这怎么可能?

(我最初发现这个是因为运行 pytest a.py 就像 py a.py 一样,即被破坏了,但是 python -m pytest a.py 有效,大概是因为 pytest 入口点 uses the py launcher .)

最佳答案

每个进程都在一个进程组中。它要么继承其父组,要么通过 CREATE_NEW_PROCESS_GROUP 创建标志创建为新组的组长。据我所知,GenerateConsoleCtrlEvent 是唯一使用进程组的 API,并且没有查询进程组 ID 的 API。您可以从 PEB 中的 ProcessParameters 获取它,但这涉及使用未记录的内部结构。没有人应该这样做,因此 GenerateConsoleCtrlEvent 应该只发送到组 0 以广播事件或发送到您知道作为新组创建的子进程。

您在这里发现的问题是,将事件发送到附加到控制台但不是组长的进程会被静默处理,就好像目标是组 0 一样。特别是在您的情况下,您开始py.exe 作为组长,然后尝试将 CTRL_C_EVENT 发送到 python.exe,即 os.getpid()。在这种情况下,您必须发送到 os.getppid()

由于 os.kill 的困惑实现,此问题在 Windows 上的 Python 脚本中很常见。它将进程 ID 和进程组 ID 合并。如果 GenerateConsoleCtrlEvent 用于 os.killpg(当前未在 Windows 上实现)并且 TerminateProcess 单独用于 os.kill

调用 os.kill(os.getpid(), signal.CTRL_C_EVENT); time.sleep(10) 时遇到随机挂起可能是由于竞争条件. time.sleep 由Modules/timemodule.c 中的pysleep 实现。在 Windows 上,当在主线程中调用时,它等待由 SIGINT 的信号处理程序设置的事件(但由于某些原因不是 SIGBREAK)。此处可能的竞争是 pysleep 在等待事件之前重置事件。信号处理程序在新线程上执行,有时它可能在 pysleep 重置事件之前已经设置了事件。这是可以想象的,因为执行 CPython 字节码相对较慢。也就是说,我预计这将是一场势均力敌的比赛,因为创建控制处理程序线程涉及很多步骤,如下面的 Windows 10 概述所示。

1. Console Client -- Main Thread (python.exe)
   kernelbase!GenerateConsoleCtrlEvent
   kernelbase!ConsoleCallServer
   ntdll!NtDeviceIoControlFile

2. Device Driver (condrv.sys)
   condrv!CdpDispatchDeviceControl

    3a. Console Server (conhost.exe)
        ntdll!NtDeviceIoControlFile
        conhostv2!SrvGenerateConsoleCtrlEvent
        conhostv2!ProcessCtrlEvents
        user32!ConsoleControl
        ntdll!CsrClientCallServer
        ntdll!NtRequestWaitReplyPort (ALPC)

    3b. Windows Server (csrss.exe)
        ntdll!NtAlpcSendWaitReceivePort
        winsrv!SrvEndTask
        winsrv!CreateCtrlThread
        ntdll!NtCreateThreadEx (Control Thread)

    3c. Console Client -- Control Thread (python.exe)
        kernelbase!CtrlRoutine
        ucrtbase!ctrlevent_capture (Emulate SIGINT)
        python36!signal_handler
        kernelbase!SetEvent (SIGINT Event -- Race with step 4)

4. Console Client -- Main Thread (python.exe)
   python36!pysleep
   kernelbase!ResetEvent (SIGINT Event -- Race with step 3c)
   kernelbase!WaitForSingleObjectEx (SIGINT Event)
   python36!PyErr_CheckSignals       
   python36!signal_default_int_handler

如果竞争条件是问题所在,那么在 GenerateConsoleCtrlEvent 被调用之前给 time.sleep 足够的时间来重置事件应该可以解决它。尝试使用 threading.Timer 稍稍延迟调用 os.kill

关于python - 在 Windows 上,python 启动器 'py' 做什么让 control-C 在进程组之间交叉?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/42180468/

有关python - 在 Windows 上,python 启动器 'py' 做什么让 control-C 在进程组之间交叉?的更多相关文章

  1. ruby - 为什么我可以在 Ruby 中使用 Object#send 访问私有(private)/ protected 方法? - 2

    类classAprivatedeffooputs:fooendpublicdefbarputs:barendprivatedefzimputs:zimendprotecteddefdibputs:dibendendA的实例a=A.new测试a.foorescueputs:faila.barrescueputs:faila.zimrescueputs:faila.dibrescueputs:faila.gazrescueputs:fail测试输出failbarfailfailfail.发送测试[:foo,:bar,:zim,:dib,:gaz].each{|m|a.send(m)resc

  2. ruby - 在 Ruby 程序执行时阻止 Windows 7 PC 进入休眠状态 - 2

    我需要在客户计算机上运行Ruby应用程序。通常需要几天才能完成(复制大备份文件)。问题是如果启用sleep,它会中断应用程序。否则,计算机将持续运行数周,直到我下次访问为止。有什么方法可以防止执行期间休眠并让Windows在执行后休眠吗?欢迎任何疯狂的想法;-) 最佳答案 Here建议使用SetThreadExecutionStateWinAPI函数,使应用程序能够通知系统它正在使用中,从而防止系统在应用程序运行时进入休眠状态或关闭显示。像这样的东西:require'Win32API'ES_AWAYMODE_REQUIRED=0x0

  3. python - 如何使用 Ruby 或 Python 创建一系列高音调和低音调的蜂鸣声? - 2

    关闭。这个问题是opinion-based.它目前不接受答案。想要改进这个问题?更新问题,以便editingthispost可以用事实和引用来回答它.关闭4年前。Improvethisquestion我想在固定时间创建一系列低音和高音调的哔哔声。例如:在150毫秒时发出高音调的蜂鸣声在151毫秒时发出低音调的蜂鸣声200毫秒时发出低音调的蜂鸣声250毫秒的高音调蜂鸣声有没有办法在Ruby或Python中做到这一点?我真的不在乎输出编码是什么(.wav、.mp3、.ogg等等),但我确实想创建一个输出文件。

  4. ruby-on-rails - rails : "missing partial" when calling 'render' in RSpec test - 2

    我正在尝试测试是否存在表单。我是Rails新手。我的new.html.erb_spec.rb文件的内容是:require'spec_helper'describe"messages/new.html.erb"doit"shouldrendertheform"dorender'/messages/new.html.erb'reponse.shouldhave_form_putting_to(@message)with_submit_buttonendendView本身,new.html.erb,有代码:当我运行rspec时,它失败了:1)messages/new.html.erbshou

  5. ruby-on-rails - Rails - 子类化模型的设计模式是什么? - 2

    我有一个模型:classItem项目有一个属性“商店”基于存储的值,我希望Item对象对特定方法具有不同的行为。Rails中是否有针对此的通用设计模式?如果方法中没有大的if-else语句,这是如何干净利落地完成的? 最佳答案 通常通过Single-TableInheritance. 关于ruby-on-rails-Rails-子类化模型的设计模式是什么?,我们在StackOverflow上找到一个类似的问题: https://stackoverflow.co

  6. ruby-on-rails - 'compass watch' 是如何工作的/它是如何与 rails 一起使用的 - 2

    我在我的项目目录中完成了compasscreate.和compassinitrails。几个问题:我已将我的.sass文件放在public/stylesheets中。这是放置它们的正确位置吗?当我运行compasswatch时,它不会自动编译这些.sass文件。我必须手动指定文件:compasswatchpublic/stylesheets/myfile.sass等。如何让它自动运行?文件ie.css、print.css和screen.css已放在stylesheets/compiled。如何在编译后不让它们重新出现的情况下删除它们?我自己编译的.sass文件编译成compiled/t

  7. ruby - 什么是填充的 Base64 编码字符串以及如何在 ruby​​ 中生成它们? - 2

    我正在使用的第三方API的文档状态:"[O]urAPIonlyacceptspaddedBase64encodedstrings."什么是“填充的Base64编码字符串”以及如何在Ruby中生成它们。下面的代码是我第一次尝试创建转换为Base64的JSON格式数据。xa=Base64.encode64(a.to_json) 最佳答案 他们说的padding其实就是Base64本身的一部分。它是末尾的“=”和“==”。Base64将3个字节的数据包编码为4个编码字符。所以如果你的输入数据有长度n和n%3=1=>"=="末尾用于填充n%

  8. ruby - 解析 RDFa、微数据等的最佳方式是什么,使用统一的模式/词汇(例如 schema.org)存储和显示信息 - 2

    我主要使用Ruby来执行此操作,但到目前为止我的攻击计划如下:使用gemsrdf、rdf-rdfa和rdf-microdata或mida来解析给定任何URI的数据。我认为最好映射到像schema.org这样的统一模式,例如使用这个yaml文件,它试图描述数据词汇表和opengraph到schema.org之间的转换:#SchemaXtoschema.orgconversion#data-vocabularyDV:name:namestreet-address:streetAddressregion:addressRegionlocality:addressLocalityphoto:i

  9. ruby-on-rails - 渲染另一个 Controller 的 View - 2

    我想要做的是有2个不同的Controller,client和test_client。客户端Controller已经构建,我想创建一个test_clientController,我可以使用它来玩弄客户端的UI并根据需要进行调整。我主要是想绕过我在客户端中内置的验证及其对加载数据的管理Controller的依赖。所以我希望test_clientController加载示例数据集,然后呈现客户端Controller的索引View,以便我可以调整客户端UI。就是这样。我在test_clients索引方法中试过这个:classTestClientdefindexrender:template=>

  10. ruby - 为什么 4.1%2 使用 Ruby 返回 0.0999999999999996?但是 4.2%2==0.2 - 2

    为什么4.1%2返回0.0999999999999996?但是4.2%2==0.2。 最佳答案 参见此处:WhatEveryProgrammerShouldKnowAboutFloating-PointArithmetic实数是无限的。计算机使用的位数有限(今天是32位、64位)。因此计算机进行的浮点运算不能代表所有的实数。0.1是这些数字之一。请注意,这不是与Ruby相关的问题,而是与所有编程语言相关的问题,因为它来自计算机表示实数的方式。 关于ruby-为什么4.1%2使用Ruby返

随机推荐