草庐IT

c++ - 可调用项,转发,右值和线程

coder 2024-02-05 原文

如何转发可能是右值及其(可变)参数的可调用对象,以使执行对于待生成的线程而言100%正确且可靠?

我的猜测是答案将是“等待条件变量”,但我想确定。

我为什么要问这个?

我有一个Homebrewn线程实现,在std::thread出现之前很久就可以100%可靠地工作了。它仍然可以正常工作。现在我们确实有了std::thread了一段时间(或多或少,这就是说……由于依赖于gthr/pthread,MinGW类型的发行版对线程的支持不是那么好,可悲的是,我绝对需要支持Win32)。
std::thread具有这个很酷的功能,您可以传递一个lambda以及任意参数,并且它以某种方式起作用。棒极了。

我的实现要求您要么从基类派生,要么将指针传递给状态块,该状态块包含一个函数指针和几个数据指针(与lambda基本上相同,但丑陋,笨拙且不灵活) 。

我并不是真的需要lambda功能,但是它很酷,所以我认为我会实现它。这有多难。

判决

该代码简单明了,并且工作得非常好,除了它不是。我发现在多次成功运行并使用内联lambda创建两个线程后,它不起作用。换句话说

class thread { [...]  template<typename F, typename... A> thread(F&& f, A&&... args) : handle( detail::spawn_thread(std::forward<>(...)) ) { } };

thread a([](){...}); // works fine 100% of the time alone, but
thread b([](){...}); // one failure out of 20, if both are present

嗯,真有趣。怎么会这样?甚至没有足够的代码来产生严重故障的可能性。转发通用引用,生成带有指向参数的指针的线程,所有内容看起来都是纯真的。

除此以外,如果spawn_thread返回时另一个线程尚未启动(这在我的系统中大约每20次发生一次)。
因为在这种情况下,新线程将尝试读取您刚刚释放并覆盖的状态。

标准库方法

让我们看看标准库是如何做到的!

有趣的是,查看标准实现(我的无线程MinGW-w64上缺少gthr文件,但可以在github上找到它们),结果发现它们几乎具有完全相同的代码。
除了我使用不带下划线且类型定义较少的单字符模板参数外,标准库使用动态分配。

哦,等等,动态分配状态,仅此而已!多么血腥明显。让我们作弊,看看他们到底在做什么。 (我对代码进行了编辑,以使其更易于阅读,删除了错误检查并遮盖了typedef,功能是相同的)。
class thread
{
...
    struct _State { virtual void _M_run() = 0; };

    template<typename _Callable> struct _State_impl : public _State
    {
        _Callable       _M_func;
        _State_impl(_Callable&& __f) : _M_func(std::forward<_Callable>(__f)) { }
        void _M_run() { _M_func(); }
    };

    template<typename _Callable, typename... _Args> explicit thread(_Callable&& __f, _Args&&... __args)
    {
        _M_start_thread(_S_make_state(std::__bind_simple(std::forward<_Callable>(__f), std::forward<_Args>(__args)...)));
    //  _M_start_thread( unique_ptr<blah> (new blah(std::forward<>(blah))) );  // ---> OK, store state, and pass to _M_start_thread
    }

    void _M_start_thread(unique_ptr<_State> state, void (*)())
    {
        __gthread_create( ...  &execute_native_thread_routine, state.get()); // __gthread_create ==  phtread_create
        state.release();
    }
};

在哪里:
    extern "C"
     {
        static void* execute_native_thread_routine(void* __p)
        {
          thread::_State_ptr __t { static_cast<thread::_State*>(__p) };
          __t->_M_run(); // courageous!
        }
    }    

显然,标准实现是正确的。如果您有5%的程序可以运行amok的机会,那么数百万个每日用户中就有一个很早以前就注意到了。

但是,我不明白为什么是正确的,或者是为什么。如果您保证新产生的线程在原始线程返回之前运行,那当然可以工作。但是据我所知,pthreads或Win32都没有提供任何保证。

对我来说,方法看起来像:
  • 动态分配状态,分配给unique_ptr
  • 将原始指针传递给pthread_create
  • 状态
  • 释放unique_ptr,释放状态这实际上就是标准实现“有效”的原因。它故意泄漏状态(感谢T.C.清理我将releasereset混淆了)。
  • 最终运行execute_native_thread_routine(不同的线程)
  • 祈祷

  • 虽然我没有其他可靠的解决方案,但:
  • 动态分配状态
  • 传递指向pthread_create的指针
  • collect underpants
  • ???
  • 安全释放状态
  • 利润!!!

  • 似乎有必要像等待事件计数/信号灯/条件变量(无论什么可用)之类,以确保线程已启动,不是吗?当然,这会使生成线程的效率非常低下。

    有人可能会认为shared_ptr可以解决问题。但是,如何通过系统库接口(interface)成功地传递shared_ptr,而该系统库接口(interface)则采用void*并将原始指针传递给其他线程呢?这不会飞。

    我几乎感觉就像只是在泄漏状态-不会在数百个线程中创建线程,而且泄漏的几十个字节可能并不明显。但是,然后,自动化分析工具将迎刃而解,如果进行了审核,审核员将非常非常聪明,可以指出这一非常危险的漏洞。

    我曾经考虑过只在线程类中存储一个std::function(似乎很合理,因为线程对象通常与该线程一样长的生命周期)。但是std::function想知道您在类范围内没有的类型...

    是否有更好(正确且可靠)的方法来做到这一点,而又不会丢失任何东西?

    最佳答案

    在花了半小时写了这个问题之后,我想我只是想出了令人尴尬的简单“Duh!”。本人对问题的回答类型:

    Do not release the state in the calling thread at all. Instead, do it in the freshly created thread.



    由于新线程必须(很明显)正在运行才能删除状态,因此不需要进一步的同步,也不需要传递智能指针。

    为了防万一lambda抛出异常,为了安全起见,将原始指针包装到新线程一侧的unique_ptr中并没有什么害处,如下所示:
    void* thr_prc(void* st) { std::unique_ptr<call_base>{static_cast<call_base*>(st)}->exec(); }
    

    关于c++ - 可调用项,转发,右值和线程,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/39470352/

    有关c++ - 可调用项,转发,右值和线程的更多相关文章

    1. ruby-on-rails - 如何优雅地重启 thin + nginx? - 2

      我的瘦服务器配置了nginx,我的ROR应用程序正在它们上运行。在我发布代码更新时运行thinrestart会给我的应用程序带来一些停机时间。我试图弄清楚如何优雅地重启正在运行的Thin实例,但找不到好的解决方案。有没有人能做到这一点? 最佳答案 #Restartjustthethinserverdescribedbythatconfigsudothin-C/etc/thin/mysite.ymlrestartNginx将继续运行并代理请求。如果您将Nginx设置为使用多个上游服务器,例如server{listen80;server

    2. ruby - RuntimeError(自动加载常量 Apps 多线程时检测到循环依赖 - 2

      我收到这个错误:RuntimeError(自动加载常量Apps时检测到循环依赖当我使用多线程时。下面是我的代码。为什么会这样?我尝试多线程的原因是因为我正在编写一个HTML抓取应用程序。对Nokogiri::HTML(open())的调用是一个同步阻塞调用,需要1秒才能返回,我有100,000多个页面要访问,所以我试图运行多个线程来解决这个问题。有更好的方法吗?classToolsController0)app.website=array.join(',')putsapp.websiteelseapp.website="NONE"endapp.saveapps=Apps.order("

    3. ruby - 使用 `+=` 和 `send` 方法 - 2

      如何将send与+=一起使用?a=20;a.send"+=",10undefinedmethod`+='for20:Fixnuma=20;a+=10=>30 最佳答案 恐怕你不能。+=不是方法,而是语法糖。参见http://www.ruby-doc.org/docs/ProgrammingRuby/html/tut_expressions.html它说Incommonwithmanyotherlanguages,Rubyhasasyntacticshortcut:a=a+2maybewrittenasa+=2.你能做的最好的事情是:

    4. ruby - 如何让Ruby捕获线程中的语法错误 - 2

      我正在尝试使用ruby​​编写一个双线程客户端,一个线程从套接字读取数据并将其打印出来,另一个线程读取本地数据并将其发送到远程服务器。我发现的问题是Ruby似乎无法捕获线程内的错误,这是一个示例:#!/usr/bin/rubyThread.new{loop{$stdout.puts"hi"abc.putsefsleep1}}loop{sleep1}显然,如果我在线程外键入abc.putsef,代码将永远不会运行,因为Ruby将报告“undefinedvariableabc”。但是,如果它在一个线程内,则没有错误报告。我的问题是,如何让Ruby捕获这样的错误?或者至少,报告线程中的错误?

    5. ruby - 如何在 ruby​​ 中运行后台线程? - 2

      我是ruby​​的新手,我认为重新构建一个我用C#编写的简单聊天程序是个好主意。我正在使用Ruby2.0.0MRI(Matz的Ruby实现)。问题是我想在服务器运行时为简单的服务器命令提供I/O。这是从示例中获取的服务器。我添加了使用gets()获取输入的命令方法。我希望此方法在后台作为线程运行,但该线程正在阻塞另一个线程。require'socket'#Getsocketsfromstdlibserver=TCPServer.open(2000)#Sockettolistenonport2000defcommandsx=1whilex==1exitProgram=gets.chomp

    6. ruby - 如何计算 Liquid 中的变量 +1 - 2

      我对如何计算通过{%assignvar=0%}赋值的变量加一完全感到困惑。这应该是最简单的任务。到目前为止,这是我尝试过的:{%assignamount=0%}{%forvariantinproduct.variants%}{%assignamount=amount+1%}{%endfor%}Amount:{{amount}}结果总是0。也许我忽略了一些明显的东西。也许有更好的方法。我想要存档的只是获取运行的迭代次数。 最佳答案 因为{{incrementamount}}将输出您的变量值并且不会影响{%assign%}定义的变量,我

    7. ruby - Rails 开发服务器、PDFKit 和多线程 - 2

      我有一个使用PDFKit呈现网页的pdf版本的Rails应用程序。我使用Thin作为开发服务器。问题是当我处于开发模式时。当我使用“bundleexecrailss”启动我的服务器并尝试呈现任何PDF时,整个过程会陷入僵局,因为当您呈现PDF时,会向服务器请求一些额外的资源,如图像和css,看起来只有一个线程.如何配置Rails开发服务器以运行多个工作线程?非常感谢。 最佳答案 我找到的最简单的解决方案是unicorn.geminstallunicorn创建一个unicorn.conf:worker_processes3然后使用它:

    8. arrays - Ruby 数组 += vs 推送 - 2

      我有一个数组数组,想将元素附加到子数组。+=做我想做的,但我想了解为什么push不做。我期望的行为(并与+=一起工作):b=Array.new(3,[])b[0]+=["apple"]b[1]+=["orange"]b[2]+=["frog"]b=>[["苹果"],["橙子"],["Frog"]]通过推送,我将推送的元素附加到每个子数组(为什么?):a=Array.new(3,[])a[0].push("apple")a[1].push("orange")a[2].push("frog")a=>[[“苹果”、“橙子”、“Frog”]、[“苹果”、“橙子”、“Frog”]、[“苹果”、“

    9. += 的 Ruby 方法 - 2

      有没有办法让Ruby能够做这样的事情?classPlane@moved=0@x=0defx+=(v)#thisiserror@x+=v@moved+=1enddefto_s"moved#{@moved}times,currentxis#{@x}"endendplane=Plane.newplane.x+=5plane.x+=10putsplane.to_s#moved2times,currentxis15 最佳答案 您不能在Ruby中覆盖复合赋值运算符。任务在内部处理。您应该覆盖+,而不是+=。plane.a+=b与plane.a=

    10. ruby - Ruby 1.9.1 中的 native 线程,对我有什么好处? - 2

      所以,Ruby1.9.1现在是declaredstable.Rails应该与它一起工作,并且正在慢慢地将gem移植到它。它具有native线程和全局解释器锁(GIL)。自从GIL到位后,原生线程是否比1.9.1中的绿色线程有任何优势? 最佳答案 1.9中的线程是原生的,但它们被“放慢了速度”,一次只允许一个线程运行。这是因为如果线程真的并行运行,它会混淆现有代码。优点:IO现在在线程中是异步的。如果一个线程阻塞在IO上,那么另一个线程将继续执行直到IO完成。C扩展可以使用真正的线程。缺点:任何非线程安全的C扩展都可能存在使用Thre

    随机推荐