- r - 以节省内存的方式增长 data.frame
- ruby-on-rails - ruby/ruby on rails 内存泄漏检测
- android - 无法解析导入android.support.v7.app
- UNIX 域套接字与共享内存(映射文件)
我有一个控制台应用程序,允许用户指定要处理的变量。这些变量有三种形式:string、double 和 long(double 和 long 是迄今为止最常用的类型)。用户可以以任何顺序指定他们喜欢的任何变量,因此我的系统必须能够处理它。为此,在我的应用程序中,我一直将它们存储为对象,然后根据需要进行转换/取消转换。例如:
public class UnitResponse
{
public object Value { get; set; }
}
我的理解是盒装对象比标准值类型占用更多的内存(大约 12 个字节)。
我的问题是:使用 dynamic 关键字存储这些值会更有效吗?它可能会解决装箱/拆箱问题,如果它更有效,这将如何影响性能?
编辑
在最坏的情况下,为了提供一些上下文并防止“您确定您使用足够的 RAM 来担心这个”,我需要担心 420,000,000 个数据点(60 个变量 * 7,000,000 条记录)。这是我保留的关于每个变量的一堆其他数据(包括一些 bool 值等)的补充。所以减少内存确实会产生巨大的影响。
最佳答案
好的,所以这里的真正问题是“我有一个非常庞大的数据集存储在内存中,我如何优化它在时间和内存空间上的性能?”
几个想法:
动态不是吗?这是拳击加上一大堆其他开销。 (与其他动态调度系统相比,C# 的动态速度非常快,但从绝对意义上来说它并不快或小)。
这很恶心,但您可以考虑使用一个结构,其布局在各个字段之间共享内存 - 就像 C 中的联合。这样做真的很恶心并且根本不安全 但它可以在这样的情况下提供帮助。在网络上搜索“StructLayoutAttribute”;你会找到教程。
通常我不建议使用 float 而不是 double,因为它是一种虚假的经济;当他们有一个数字时,人们通常会以这种方式节约,就像节省四个字节会有所作为。 4200 万个 float 和 4200 万个 double 之间的差异是相当大的。
您可以利用的数据中是否存在规律性?例如,假设在您的 4200 万条记录中,每个长整数只有 100000 个实际值,每个 double 只有 100000 个值,每个字符串只有 100000 个值。在这种情况下,您为 long、double 和字符串创建某种类型的索引存储,然后每条记录都得到一个整数,其中低位是索引,前两位表示从哪个存储中取出它。现在您有 4200 万条记录,每条记录都包含一个 int,并且这些值以某种非常紧凑的形式存储在其他地方。
将 bool 值存储为字节中的位;编写属性来进行位移以将它们取出。这样可以节省几个字节。
记住,内存实际上是磁盘空间; RAM 只是它上面的一个方便的缓存。如果数据集太大而无法保存在 RAM 中,那么 something 会将其分页回磁盘并稍后再读回;那可能是您,也可能是操作系统。您可能比操作系统更了解您的数据位置。您可以以某种方便的可分页形式(如 b 树)将数据写入磁盘,并更有效地将数据保存在磁盘上,并仅在需要时才将其放入内存。
关于c# - 在 C#/.NEt 中,动态类型占用的空间是否比对象少?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/4823213/
运行 Tomcat 失败并出现 java.lang.OutOfMemoryError - 与缺少 PermGen 空间相关的错误。 我最近将 Tomcat 更改为以自己的用户(而非 root)运行。
我们有一个表,其中包含数百万行,其中包含 PostGIS 几何图形。我们要执行的查询是:落在边界几何内的最新条目是什么?这个查询的问题是我们经常会有大量的项目匹配边界框(半径大约为 5 公里),然后
我有一个Elasticsearch设置,它将允许用户搜索通配符作为索引。 array:3 [ "index" => "users" "type" => "user" "body" => arra
我创建了一个表,其中每行包含两个按钮,并且两个按钮连接在一起,我想将两个按钮分开。我用过 不起作用,css 也是,这是他们的另一种方式。 我有另一个问题,因为我不想在表格边框内显示操作按钮,而是在靠近
我试图在 jQuery Mobile 中的两个按钮之间留出空白。现实中的布局是这样的: Button 1 Button 2 (Hidden w/ display: none)
按照目前的情况,这个问题不适合我们的问答形式。我们希望答案得到事实、引用或专业知识的支持,但这个问题可能会引发辩论、争论、投票或扩展讨论。如果您觉得这个问题可以改进并可能重新打开,visit the
您好,我对图表应用程序还很陌生。现在我为我的应用程序创建了条形图。当我运行 create bar chart as separate project 时,输出如下所示。 然后当我将条形图与我的应用程序
我在使用 H2 和 GeoDB(内存中,junit)时遇到问题。 另外,使用 Hibernate 5(每个包的最新版本,包括 hibernate-spatial)和 Spring 4。 通过 id 实
我想画一张澳大利亚的 map ,并将每个城市表示为一个点。 然后突出显示人口众多(> 1M)的城市 library(sp) library(maps) data(canada.cities) head
关闭。这个问题是opinion-based .它目前不接受答案。 想改进这个问题?更新问题,以便 editing this post 提供事实和引用来回答它. 6年前关闭。 Improve this
如何保持.txt文件中存在的空格?在.txt文件中,它表示: text :text text1 :text1 text23 :text2 text345 :text3 如果我写这段
以下哪个键最大? 选项 1:16 个数字 [0,9] 选项 2:30 个元音 选项 3:字母表中的 16 个字母 选项 4:32 位 有人可以帮助我,告诉我哪一个是正确的答案以及我们如何计算它吗?我知
在 Unity 3d 中使用 Azure 空间 anchor 来实现在 iOS 和 Android 上部署的室内和室外增强现实体验是否有益? 最佳答案 是的,对于 Azure Spatial Anch
我有一个绝对定位的圆形图像。图像只需占据屏幕宽度的 17%,并且距离顶部 5 个像素。 问题是,当我调整图像大小以占据屏幕宽度的 17% 时,它会这样做,但同时容器会变长。图像本身不会拉伸(stret
我在 Ubuntu 14.04 上使用 Cassandra。从文档中,我可以看到运行命令: nodetool snapshot 创建我的 key 空间的快照。 命令的输出是: nodetool sn
Heroku引入了“私有(private)空间”,是否可以将现有应用迁移到私有(private)空间? https://blog.heroku.com/archives/2015/9/10/herok
是否允许在语义记录中使用非绑定(bind)空格 或其他 HTML 编码字符?我遇到的问题是 ; 字符被软件视为记录的结尾。 例如:假设我有一份婚姻记录,其中包含 2 个结婚者的姓氏、结婚年份以及结
我正在研究“智能 parking ”项目,偶然发现了包含我们真正需要的YouTube视频。我们已经实现了第一部分,即从视频源进行实时透视变换,下一步是将其定义为一组矩形 我基本上需要知道他是如何做到的
我有两个类:Engine 和 Trainset(多个单元),这两个类共享其 ID 空间,其中包含名称和系列 id=- . 这是我的Engine类(它是抽象的,因为有引擎的子类型(DieselEngin
如果有人能帮助我,那就太好了。 我正在尝试使用Java的Split命令,使用空格分割字符串,但问题是,字符串可能没有空格,这意味着它将只是一个简单的顺序(而不是“输入2”将是“退出”) Scanner
我是一名优秀的程序员,十分优秀!