草庐IT

c++ - 无锁简单隔离存储算法

coder 2024-02-12 原文

我正在使用 C++ 开发“Simple Segregated Storage”内存池的无锁版本。

SSS 内存池类似于 slab 分配器:它基本上只是一 block 内存,被分成大小相等的 block ,我们有一个指向第一个可用 block 的空闲列表指针。分配只是将指针向上移动到下一个 block ,释放只是将空闲列表指针设置为释放 block ,并将释放 block 上的“下一个”指针指向自由列表指针的旧值。

所以它基本上是一个单链表。

现在,我正在尝试编写简单隔离存储算法的无锁版本。如果我们假设隔离初始内存块(即创建链表)总是在进入多线程环境之前完成,我们只需要担心分配和释放 block ——在这种情况下问题变得非常类似于无锁单链表,这是一个很好理解的问题。

因此,在我看来,分配和解除分配可以通过使用简单的比较和交换指令以无锁方式轻松完成。

假设我们有以下空闲列表指针:

std::atomic<unsigned char*> m_first

假设我们有一个辅助函数nextof(),它接受一个 block 指针并返回对“下一个指针”的引用。 next 指针实际上嵌入在内存块中 - 因此 nextof 函数如下所示:

unsigned char*& nextof(void* ptr)
{
    return *static_cast<unsigned char**>(ptr);
}

至少 Boost library implements Simple Segregated Storage 是这样的.

无论如何,我对无锁原子 allocate 函数的尝试是:

void* malloc()
{
    unsigned char* first = m_first.load();
    if (!first) return nullptr;

    while (!m_first.compare_exchange_strong(first, nextof(first))) 
    {
        if (!first) break;
    }

    return first;
}

所以 - 这看起来非常简单。我们需要做的就是自动将 m_first 设置为嵌入在 m_first 指向的 block 中的下一个指针。最初,我认为这就像说 m_first.store(nextof(m_first)) 一样简单 - 但不幸的是,我认为这不是原子的,因为我们实际上是在此处进行存储和加载相同的内存位置 - 我们将一个新值存储到 m_first 中,同时加载 m_first 的值以获得它的下一个指针。

所以,看来我们需要进行比较和交换。在上面的代码中,我以原子方式将 m_first 的值加载到局部变量中。然后,在检查 null 之后,我使用 CAS 自动更改 m_first 的值,当且仅当它仍然等于局部变量的值时。如果不是,则将局部变量更新为现在的 m_first,并且我们继续循环,直到我们不被其他线程抢占。

解除分配有点棘手 - 这里我们需要将 m_first 的值更改为解除分配的 block ,并且将解除分配的 block 上的下一个指针更新为指向m_first 曾经是什么。

我的尝试是:

void free(void* chunk)
{
    unsigned char* first = m_first.load();
    nextof(chunk) = first;

    while (!m_first.compare_exchange_strong(first, static_cast<unsigned char*>(chunk)))
    {
        nextof(chunk) = first;
    }
}

我不太确定我有这个权利,但我认为这是正确的。首先,我以原子方式加载 m_first 的值并将其存储在局部变量中。然后,我将 block-to-be-free'd 上的下一个指针设置为我的 m_first 的本地拷贝。当然,到目前为止,另一个线程可能已经介入并将 m_first 设置为其他内容 - 所以我现在必须执行 CAS 操作来检查 m_first 是否仍然是我所期望的.如果不是,我必须将 next 指针设置为适当的值,然后继续循环。

据我所知,这都是竞争条件安全的,对 mallocfree 有一个 CAS 操作。

问题:由于无锁算法很难,我不确定我是否正确。我是否在这里忽略了可能导致竞争条件的事情?

最佳答案

一个老答案,但我想我可能会发表意见。除非我弄错了,否则我相信代码可能会通过 ABA problem 的版本泄漏数据。 .

问题是在将参数 nextof(first) 传递给 malloc 内的原子 compare_exchange_strong 之前对其进行评估。如果我们从 malloc 函数中获取 while 循环:

while (!m_first.compare_exchange_strong(first, nextof(first)))
{
    if (!first) return nullptr;
}

并重写它以在传递给 compare_exchange_strong 之前显式评估 nextof(first),以使其更明显:

while (true)
{
    auto tmp_next = nextof(first);

    // this is where the chance for ABA exists

    if (m_first.compare_exchange_strong(first, tmp_next))
        break;

    if (!first) return nullptr;
}

然后 m_first 似乎有可能更改为不同的值并在这两行之间返回,另一个线程改变实际的 nextof(m_first)同时:

// I will represent the linked list using letters,
// i.e. m_first -> "A" means that "A" is at the head,
// and "A" -> "B" means that "A" points to "B"

void* malloc()
{
    // at the start, m_first points to "A": m_first -> "A" -> "B" -> "C"
    unsigned char* first = m_first.load();

    // --> thread #2 calls malloc() here and acquires "A", and
    //     removes it, so: m_first -> "B" -> "C"

    if (!first) return nullptr;

    while (true)
    {
        unsigned char * tmp_next = nextof(first);
        // tmp_next is "B" at this moment, because 'first' is still "A"            

        // --> some third thread returns some even older object now,
        //     so m_first -> "M" -> "B" -> "C"

        // --> thread #2 now calls free() to return "A", resulting in
        //     my_first -> "A" -> "M" -> "B" -> "C"

        // m_first is now back to "A", but tmp_next points
        // to old "B" instead of "M", and the following line succeeds
        // and "M" is lost forever: m_first -> "B" -> "C"

        if (m_first.compare_exchange_strong(first, tmp_next))
            break;

        if (!first) return nullptr;
    }

    return first;
}

Wikipedia article on ABA包含一些解决这些问题的建议,例如“标记状态引用”(基本上向这些指针添加类似“交易计数器”的东西,以便您可以检测到第二个“A”与第一个不同),或“中间我发现实现起来稍微复杂一些(显然是由 John D. Valois in this article 发明的)。

关于c++ - 无锁简单隔离存储算法,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/26665659/

有关c++ - 无锁简单隔离存储算法的更多相关文章

  1. ruby - 解析 RDFa、微数据等的最佳方式是什么,使用统一的模式/词汇(例如 schema.org)存储和显示信息 - 2

    我主要使用Ruby来执行此操作,但到目前为止我的攻击计划如下:使用gemsrdf、rdf-rdfa和rdf-microdata或mida来解析给定任何URI的数据。我认为最好映射到像schema.org这样的统一模式,例如使用这个yaml文件,它试图描述数据词汇表和opengraph到schema.org之间的转换:#SchemaXtoschema.orgconversion#data-vocabularyDV:name:namestreet-address:streetAddressregion:addressRegionlocality:addressLocalityphoto:i

  2. ruby-on-rails - 如何优雅地重启 thin + nginx? - 2

    我的瘦服务器配置了nginx,我的ROR应用程序正在它们上运行。在我发布代码更新时运行thinrestart会给我的应用程序带来一些停机时间。我试图弄清楚如何优雅地重启正在运行的Thin实例,但找不到好的解决方案。有没有人能做到这一点? 最佳答案 #Restartjustthethinserverdescribedbythatconfigsudothin-C/etc/thin/mysite.ymlrestartNginx将继续运行并代理请求。如果您将Nginx设置为使用多个上游服务器,例如server{listen80;server

  3. ruby - 简单获取法拉第超时 - 2

    有没有办法在这个简单的get方法中添加超时选项?我正在使用法拉第3.3。Faraday.get(url)四处寻找,我只能先发起连接后应用超时选项,然后应用超时选项。或者有什么简单的方法?这就是我现在正在做的:conn=Faraday.newresponse=conn.getdo|req|req.urlurlreq.options.timeout=2#2secondsend 最佳答案 试试这个:conn=Faraday.newdo|conn|conn.options.timeout=20endresponse=conn.get(url

  4. ruby - 用 Ruby 编写一个简单的网络服务器 - 2

    我想在Ruby中创建一个用于开发目的的极其简单的Web服务器(不,不想使用现成的解决方案)。代码如下:#!/usr/bin/rubyrequire'socket'server=TCPServer.new('127.0.0.1',8080)whileconnection=server.acceptheaders=[]length=0whileline=connection.getsheaders想法是从命令行运行这个脚本,提供另一个脚本,它将在其标准输入上获取请求,并在其标准输出上返回完整的响应。到目前为止一切顺利,但事实证明这真的很脆弱,因为它在第二个请求上中断并出现错误:/usr/b

  5. ruby-on-rails - 简单的 Ruby on Rails 问题——如何将评论附加到用户和文章? - 2

    我意识到这可能是一个非常基本的问题,但我现在已经花了几天时间回过头来解决这个问题,但出于某种原因,Google就是没有帮助我。(我认为部分问题在于我是一个初学者,我不知道该问什么......)我也看过O'Reilly的RubyCookbook和RailsAPI,但我仍然停留在这个问题上.我找到了一些关于多态关系的信息,但它似乎不是我需要的(尽管如果我错了请告诉我)。我正在尝试调整MichaelHartl'stutorial创建一个包含用户、文章和评论的博客应用程序(不使用脚手架)。我希望评论既属于用户又属于文章。我的主要问题是:我不知道如何将当前文章的ID放入评论Controller。

  6. ruby - 使用 Ruby 通过 Outlook 发送消息的最简单方法是什么? - 2

    我的工作要求我为某些测试自动生成电子邮件。我一直在四处寻找,但未能找到可以快速实现的合理解决方案。它需要在outlook而不是其他邮件服务器中,因为我们有一些奇怪的身份验证规则,我们需要保存草稿而不是仅仅发送邮件的选项。显然win32ole可以做到这一点,但我找不到任何相当简单的例子。 最佳答案 假设存储了Outlook凭据并且您设置为自动登录到Outlook,WIN32OLE可以很好地完成此操作:require'win32ole'outlook=WIN32OLE.new('Outlook.Application')message=

  7. ruby - Rack:如何将 URL 存储为变量? - 2

    我正在编写一个简单的静态Rack应用程序。查看下面的config.ru代码:useRack::Static,:urls=>["/elements","/img","/pages","/users","/css","/js"],:root=>"archive"map'/'dorunProc.new{|env|[200,{'Content-Type'=>'text/html','Cache-Control'=>'public,max-age=6400'},File.open('archive/splash.html',File::RDONLY)]}endmap'/pages/search.

  8. 区块链之加解密算法&数字证书 - 2

    目录一.加解密算法数字签名对称加密DES(DataEncryptionStandard)3DES(TripleDES)AES(AdvancedEncryptionStandard)RSA加密法DSA(DigitalSignatureAlgorithm)ECC(EllipticCurvesCryptography)非对称加密签名与加密过程非对称加密的应用对称加密与非对称加密的结合二.数字证书图解一.加解密算法加密简单而言就是通过一种算法将明文信息转换成密文信息,信息的的接收方能够通过密钥对密文信息进行解密获得明文信息的过程。根据加解密的密钥是否相同,算法可以分为对称加密、非对称加密、对称加密和非

  9. ruby - 使用 `+=` 和 `send` 方法 - 2

    如何将send与+=一起使用?a=20;a.send"+=",10undefinedmethod`+='for20:Fixnuma=20;a+=10=>30 最佳答案 恐怕你不能。+=不是方法,而是语法糖。参见http://www.ruby-doc.org/docs/ProgrammingRuby/html/tut_expressions.html它说Incommonwithmanyotherlanguages,Rubyhasasyntacticshortcut:a=a+2maybewrittenasa+=2.你能做的最好的事情是:

  10. postman——集合——执行集合——测试脚本——pm对象简单示例02 - 2

    //1.验证返回状态码是否是200pm.test("Statuscodeis200",function(){pm.response.to.have.status(200);});//2.验证返回body内是否含有某个值pm.test("Bodymatchesstring",function(){pm.expect(pm.response.text()).to.include("string_you_want_to_search");});//3.验证某个返回值是否是100pm.test("Yourtestname",function(){varjsonData=pm.response.json

随机推荐