草庐IT

c# - 为什么我的结构数组占用了这么多内存?

coder 2023-07-08 原文

问题:微框架如何为结构数组分配内存?

BitBucket repository带有要复制的代码。

背景和细节

我正在使用固定大小的数组创建一个队列,以在处理来自 USB 键盘的击键时插入延迟。我正在使用 struct来表示按键上下事件和延迟。

public struct QueuedEvent
{
    public readonly EventType Type;        // Byte
    public readonly byte KeyPressed;
    public readonly TinyTimeSpan Delay;    // Int16

    public readonly static QueuedEvent Empty = new QueuedEvent();
}

public enum EventType : byte
{
    None = 0,
    Delay = 1,
    KeyDown = 2,
    KeyUp = 3,
    KeyPress = 4,
}

public class FixedSizeQueue
{
    private readonly QueuedEvent[] _Array;
    private int _Head = 0;
    private int _Tail = 0;

    public FixedSizeQueue(int size)
    {
        _Array = new QueuedEvent[size];
    }

    // Enqueue and Dequeue methods follow.
}

我本来以为我的 QueuedEvent会占用 4 内存中的字节数,但是,根据垃圾收集器(特别是 VALUETYPESZARRAY 类型)的调试输出,它实际上占用了 84 每个字节!这让我觉得矫枉过正! (而且每个字节看起来确实是 84 个字节,因为如果我分配 512 个字节,我会得到 OutOfMemoryException。我有大约 20kB 的可用 RAM,所以我应该能够轻松地分配到 512 个字节)。

问题(再次): Micro Framework 如何为一个可以容纳 4 个字节的结构分配 84 个字节?

垃圾收集器数字

这是 QueuedEvent 不同大小数组的表格(在我分配 0 时减去金额之后):
+--------+-----------+-----------+---------+------------+-------+
| Number | VALUETYPE | B/Q'dEvnt | SZARRAY | B/Q'edEvnt | Total |
| 16     | 1152      | 72        | 192     | 12         | 84    |
| 32     | 2304      | 72        | 384     | 12         | 84    |
| 64     | 4608      | 72        | 768     | 12         | 84    |
| 128    | 9216      | 72        | 1536    | 12         | 84    |
+--------+-----------+-----------+---------+------------+-------+

基于 SZARRAY数字,我猜我的 QueuedEvent字段与 Int32 边界对齐,因此占用 12 字节。但我不知道额外的 72 个字节来自哪里。

编辑:我通过拨打 Debug.GC(true) 获得这些号码并观察我在调试器输出中得到的转储。我还没有找到可以准确识别每个数字含义的引用资料。

我意识到我可以简单地分配一个 int[] ,但这意味着我失去了结构的良好封装和任何类型安全性。而且我真的很想知道微框架中结构的真实成本是多少。

我的 TinyTimeSpan很像普通 TimeSpan除了使用 Int16表示毫秒数,而不是表示 100ns 滴答声的 Int64。
public struct TinyTimeSpan
{
    public static readonly TinyTimeSpan Zero = new TinyTimeSpan(0);
    private short _Milliseconds;

    public TinyTimeSpan(short milliseconds)
    {
        _Milliseconds = milliseconds;
    }
    public TinyTimeSpan(TimeSpan ts)
    {
        _Milliseconds = (short)(ts.Ticks / TimeSpan.TicksPerMillisecond);
    }

    public int Milliseconds { get { return _Milliseconds; } }
    public int Seconds { get { return _Milliseconds * 1000; } }
}

我正在使用 FEZ Domino作为硬件。这完全有可能是特定于硬件的。此外,微框架 4.1。

编辑 - 更多测试和评论答案

我运行了更多的测试(这次是在模拟器中,而不是在真实硬件上,但 QueuedEvent 的数字是相同的,所以我假设我的硬件在其他测试中是相同的)。

BitBucket repository带有要复制的代码。

以下整数类型和结构不会产生任何开销,如 VALUETYPE :
  • 字节(1 字节)
  • Int32(4 字节)
  • Int16(2 个字节)
  • Int64(8 字节)
  • double (8 字节)
  • TimeSpan(12 字节 - 奇怪,因为它的内部成员是 Int64)
  • 日期时间(12 字节 - 奇怪)

  • 然而,Guid确实:每个使用 36 个字节。

    空的静态成员确实分配了 VALUETYPE , 使用 72 个字节(比数组中的相同结构少 12 个字节)。

    将数组分配为 static成员不会改变任何东西。

    在 Debug 或 Release 模式下运行没有区别。我不知道如何在没有附加调试器的情况下获取 GC 调试信息。但是微框架是解释的,所以我不知道非附加调试器会产生什么影响。

    微框架不支持 unsafe代码。也不支持StructLayout Explicit (好吧,技术上确实如此,但没有 FieldOffset 属性)。 StructLayout AutoSequential没有区别。

    以下是更多结构及其测量的内存分配:
    // Uses 12 bytes in SZARRAY and 24 in VALUETYPE, total = 36 each
    public struct JustAnInt32
    {
        public readonly Int32 Value;
    }
    
    
    // Uses 12 bytes in SZARRAY and 48 in VALUETYPE, total = 60 each
    // Same as original QueuedEvent but only uses integral types.
    public struct QueuedEventSimple
    {
        public readonly byte Type;
        public readonly byte KeyPressed;
        public readonly short DelayMilliseconds;
        // Replacing the short with TimeSpan does not change memory usage.
    }
    
    // Uses 12 bytes in SZARRAY and 12 in VALUETYPE, total = 24 each
    // I have to admit 24 bytes is a bit much for an empty struct!!
    public struct Empty
    { 
    }
    

    似乎每次我使用自定义结构时,都会产生某种开销。无论我在结构中包含什么,它总是需要 12 个字节在 SZARRAY 中。 .所以我试过这个:
    // Uses 12 bytes in SZARRAY and 36 in VALUETYPE, total = 48 each
    public struct DifferentEntity
    {
        public readonly Double D;
        public readonly TimeSpan T;
    }
    
    // Uses 12 bytes in SZARRAY and 108 in VALUETYPE, total = 120 each
    public struct MultipleEntities
    {
        public readonly DifferentEntity E1;
        public readonly DifferentEntity E2;
    }
    
    // Uses 12 bytes in SZARRAY and 60 in VALUETYPE, total = 72 each
    // This is equivalent to MultipleEntities, but has quite different memory usage.
    public struct TwoDoublesAndTimeSpans
    {
        public readonly double D1;
        public readonly TimeSpan T1;
        public readonly double D2;
        public readonly TimeSpan T2;
    }
    

    次要编辑

    发布我自己的答案后,我意识到 SZARRAY 中总是有 12 字节的开销。每件。所以我测试了一个 object[] .在 Micro Framework 中,每个引用类型占用 12 个字节。

    空结构 public struct Empty { }每个消耗 24 个字节。

    最佳答案

    根据我的测试,我猜 ValueTypes Micro Framework 中的值类型不是我们在桌面 CLR 上习惯的真正值类型。至少,他们正在被装箱。并且可能还涉及另一个级别的间接性。这些成本产生于(对于嵌入式平台来说相当可观)内存开销。

    我将转换为 int[]在我的 FixedSizedQueue .

    实际上,我最终使用了 UInt32[]并添加了一些扩展方法来解决bit bashing。

    我在 source code 中戳了一下,但找不到任何有用的东西(我也不知道该找什么)。

    关于c# - 为什么我的结构数组占用了这么多内存?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/12445185/

    有关c# - 为什么我的结构数组占用了这么多内存?的更多相关文章

    1. ruby - 为什么我可以在 Ruby 中使用 Object#send 访问私有(private)/ protected 方法? - 2

      类classAprivatedeffooputs:fooendpublicdefbarputs:barendprivatedefzimputs:zimendprotecteddefdibputs:dibendendA的实例a=A.new测试a.foorescueputs:faila.barrescueputs:faila.zimrescueputs:faila.dibrescueputs:faila.gazrescueputs:fail测试输出failbarfailfailfail.发送测试[:foo,:bar,:zim,:dib,:gaz].each{|m|a.send(m)resc

    2. ruby-on-rails - Ruby net/ldap 模块中的内存泄漏 - 2

      作为我的Rails应用程序的一部分,我编写了一个小导入程序,它从我们的LDAP系统中吸取数据并将其塞入一个用户表中。不幸的是,与LDAP相关的代码在遍历我们的32K用户时泄漏了大量内存,我一直无法弄清楚如何解决这个问题。这个问题似乎在某种程度上与LDAP库有关,因为当我删除对LDAP内容的调用时,内存使用情况会很好地稳定下来。此外,不断增加的对象是Net::BER::BerIdentifiedString和Net::BER::BerIdentifiedArray,它们都是LDAP库的一部分。当我运行导入时,内存使用量最终达到超过1GB的峰值。如果问题存在,我需要找到一些方法来更正我的代

    3. ruby-on-rails - Rails - 子类化模型的设计模式是什么? - 2

      我有一个模型:classItem项目有一个属性“商店”基于存储的值,我希望Item对象对特定方法具有不同的行为。Rails中是否有针对此的通用设计模式?如果方法中没有大的if-else语句,这是如何干净利落地完成的? 最佳答案 通常通过Single-TableInheritance. 关于ruby-on-rails-Rails-子类化模型的设计模式是什么?,我们在StackOverflow上找到一个类似的问题: https://stackoverflow.co

    4. ruby - 使用 ruby​​ 将 HTML 转换为纯文本并维护结构/格式 - 2

      我想将html转换为纯文本。不过,我不想只删除标签,我想智能地保留尽可能多的格式。为插入换行符标签,检测段落并格式化它们等。输入非常简单,通常是格式良好的html(不是整个文档,只是一堆内容,通常没有anchor或图像)。我可以将几个正则表达式放在一起,让我达到80%,但我认为可能有一些现有的解决方案更智能。 最佳答案 首先,不要尝试为此使用正则表达式。很有可能你会想出一个脆弱/脆弱的解决方案,它会随着HTML的变化而崩溃,或者很难管理和维护。您可以使用Nokogiri快速解析HTML并提取文本:require'nokogiri'h

    5. ruby-on-rails - 在 Ruby 中循环遍历多个数组 - 2

      我有多个ActiveRecord子类Item的实例数组,我需要根据最早的事件循环打印。在这种情况下,我需要打印付款和维护日期,如下所示:ItemAmaintenancerequiredin5daysItemBpaymentrequiredin6daysItemApaymentrequiredin7daysItemBmaintenancerequiredin8days我目前有两个查询,用于查找maintenance和payment项目(非排他性查询),并输出如下内容:paymentrequiredin...maintenancerequiredin...有什么方法可以改善上述(丑陋的)代

    6. ruby - 什么是填充的 Base64 编码字符串以及如何在 ruby​​ 中生成它们? - 2

      我正在使用的第三方API的文档状态:"[O]urAPIonlyacceptspaddedBase64encodedstrings."什么是“填充的Base64编码字符串”以及如何在Ruby中生成它们。下面的代码是我第一次尝试创建转换为Base64的JSON格式数据。xa=Base64.encode64(a.to_json) 最佳答案 他们说的padding其实就是Base64本身的一部分。它是末尾的“=”和“==”。Base64将3个字节的数据包编码为4个编码字符。所以如果你的输入数据有长度n和n%3=1=>"=="末尾用于填充n%

    7. ruby - 解析 RDFa、微数据等的最佳方式是什么,使用统一的模式/词汇(例如 schema.org)存储和显示信息 - 2

      我主要使用Ruby来执行此操作,但到目前为止我的攻击计划如下:使用gemsrdf、rdf-rdfa和rdf-microdata或mida来解析给定任何URI的数据。我认为最好映射到像schema.org这样的统一模式,例如使用这个yaml文件,它试图描述数据词汇表和opengraph到schema.org之间的转换:#SchemaXtoschema.orgconversion#data-vocabularyDV:name:namestreet-address:streetAddressregion:addressRegionlocality:addressLocalityphoto:i

    8. ruby - 多次弹出/移动 ruby​​ 数组 - 2

      我的代码目前看起来像这样numbers=[1,2,3,4,5]defpop_threepop=[]3.times{pop有没有办法在一行中完成pop_three方法中的内容?我基本上想做类似numbers.slice(0,3)的事情,但要删除切片中的数组项。嗯...嗯,我想我刚刚意识到我可以试试slice! 最佳答案 是numbers.pop(3)或者numbers.shift(3)如果你想要另一边。 关于ruby-多次弹出/移动ruby​​数组,我们在StackOverflow上找到一

    9. ruby - 将数组的内容转换为 int - 2

      我需要读入一个包含数字列表的文件。此代码读取文件并将其放入二维数组中。现在我需要获取数组中所有数字的平均值,但我需要将数组的内容更改为int。有什么想法可以将to_i方法放在哪里吗?ClassTerraindefinitializefile_name@input=IO.readlines(file_name)#readinfile@size=@input[0].to_i@land=[@size]x=1whilex 最佳答案 只需将数组映射为整数:@land边注如果你想得到一条线的平均值,你可以这样做:values=@input[x]

    10. ruby - 为什么 4.1%2 使用 Ruby 返回 0.0999999999999996?但是 4.2%2==0.2 - 2

      为什么4.1%2返回0.0999999999999996?但是4.2%2==0.2。 最佳答案 参见此处:WhatEveryProgrammerShouldKnowAboutFloating-PointArithmetic实数是无限的。计算机使用的位数有限(今天是32位、64位)。因此计算机进行的浮点运算不能代表所有的实数。0.1是这些数字之一。请注意,这不是与Ruby相关的问题,而是与所有编程语言相关的问题,因为它来自计算机表示实数的方式。 关于ruby-为什么4.1%2使用Ruby返

    随机推荐