- Java 双重比较
- java - 比较器与 Apache BeanComparator
- Objective-C 完成 block 导致额外的方法调用?
- database - RESTful URI 是否应该公开数据库主键?
下面详细说明了我为什么需要这个:
我有大量数据保存为 .mat 文件....麻烦的是我需要加载一个完整的 .mat 文件才能开始在那里处理和绘制数据。如果该文件很大,将它加载到内存中就成了一项相当大的任务。
这些 .mat 文件是分析晶体管原始电气测量数据的结果。所有 .mat 文件都具有相同的结构,但每个文件对应一个不同且唯一的晶体管。
现在假设我想比较 A 和 B 中共有的所有晶体管中的某个参数,我必须手动搜索并加载我需要的所有 .mat 文件,然后尝试进行比较。没有简单的方法可以将所有这些 .mat 文件合并到一个 .mat 文件中(因为它们都具有相同的变量名称但具有不同的数据)。即使这是可能的,我也不知道如何从 .mat 文件中查询特定条目。
如果没有可以从中查询特定条目的结构化数据库,我看不出有什么方法可以轻松地做到这一点。然后我可以使用任何编程语言(继续使用 Matlab 或切换到 python)来方便地进行比较和绘图等。没有分散的 .mat 文件的麻烦。
问题在于 .mat 文件中的数据以结构和大型数组的形式构建。据我所知,将其存储在一个简单的 SQL 数据库中并不是一项简单的任务。我使用 HDF5 进行了查找,但来自 examples我看到,我必须执行很多低级命令才能将这些结构存储在 HDF 文件中,我不确定我是否可以将 HDF 文件的一部分加载到 Matlab/python 中,或者我是否还必须加载整个文件首先在内存中。
这里的目标是将所有现有的(和将要创建的).mat 文件(及其结构和数组的复合数据结构)合并到一个数据库文件中,我可以从中查询特定条目。是否有数据库解决方案可以保留我的复杂数据的结构? HDF 是正确的选择吗?还是我缺少一个简单的解决方案?
编辑:
我需要保存和检索的数据示例:
All(16).rf.SS(3,2).data
其中 All
是一个包含 7 个字段的结构数组。 rf
字段中的每个结构都是一个包含数组、整数、字符串和结构的结构。其中一个结构名为 SS
,它又是一个结构数组,每个结构包含一个名为 data
的 2x2 数组。
最佳答案
一般来说,没有简单的方法可以将....mat 文件合并到单个 .mat 文件中(因为它们都具有相同的变量名称但具有不同的数据),这是不正确的。
假设您有两个文件,data1.mat
和 data2.mat
,每个文件包含两个变量,a
和 b
。你可以这样做:
>> s = load('data1')
s =
struct with fields:
a: 'foo'
b: 3
>> s(2) = load('data2')
s =
1×2 struct array with fields:
a
b
现在你有一个 struct array (见下面的注释)。您可以像这样访问其中的数据:
>> s(1).a
ans =
'foo'
>> s(2).a
ans =
'bar'
但您也可以一次获取每个字段的所有值,如 comma-separated list ,您可以将其分配给元胞数组或矩阵:
>> s.a
ans =
'foo'
ans =
'bar'
>> allAs = {s.a}
allAs =
1×2 cell array
{'foo'} {'bar'}
>> allBs = [s.b]
allBs =
3 4
注意: 烦人的是,您似乎必须先创建具有正确字段的结构,然后才能使用索引对其进行分配。也就是说
s = struct;
s(1) = load('data1')
不会工作,但是
s = struct('a', [], 'b', [])
s(1) = load('data1')
没问题。
如果您不需要能够搜索每个 .mat 文件中的所有数据,只需搜索某些字段,您可以在 MATLAB 中构建一个索引,其中仅包含每个 .mat 文件中的相关元数据以及一个引用 (例如文件名)到文件本身。作为长期解决方案,这不太可靠,因为您必须确保索引与文件保持同步,但设置工作量应该较少。
如果您真的想将所有内容都保存在数据库中,那么您可以将您的数据结构转换为表格形式,其中任何多维元素(例如结构或数组)都被“展平”到一个表行中,每个标量值(适当命名的)表变量。
例如,如果您有一个结构 s
,其中包含字段 s.a
和 s.b
,并且 s.b
是一个 2 x 2 矩阵,您可以调用变量 s_a
、s_b_1_1
、s_b_1_2
、s_b_2_1
和 s_b_2_2
- 可能不是理想的数据库设计,但你明白了。
您应该能够修改 this answer 中的代码和/或 MATLAB 文件交换提交 flattenstruct2cell和 flatten-nested-cell-arrays以满足您的需求。
关于arrays - 您可以将 Matlab 数组和结构的复合数据存储和查询到数据库中吗?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/55901538/
我的问题是如何在 python 中创建一个简单的数据库。我的例子是: User = { 'Name' : {'Firstname', 'Lastname'}, 'Address' : {'Street
我需要创建一个与远程数据库链接的应用程序! mysql 是最好的解决方案吗? Sqlite 是唯一的本地解决方案吗? 我使用下面的方法,我想知道它是否是最好的方法! NSString *evento
给定两台 MySQL 服务器,一台本地,一台远程。两者都有一个包含表 bohica 的数据库 foobar。本地服务器定义了用户 'myadmin'@'%' 和 'myadmin'@'localhos
我有以下灵活的搜索查询 Select {vt:code},{vt:productcode},{vw:code},{vw:productcode} from {abcd AS vt JOIN wxyz
好吧,我的电脑开始运行有点缓慢,所以我重置了 Windows,保留了我的文件。因为我的大脑还没有打开,所以我忘记事先备份我的 MySQL 数据库。我仍然拥有所有原始文件,因此我实际上仍然拥有数据库,但
如何将我的 Access 数据库 (.accdb) 转换为 SQLite 数据库 (.sqlite)? 请,任何帮助将不胜感激。 最佳答案 1)如果要转换 db 的结构,则应使用任何 DB 建模工具:
系统检查发现了一些问题: 警告:?:(mysql.W002)未为数据库连接“默认”设置 MySQL 严格模式 提示:MySQL 的严格模式通过将警告升级为错误来修复 MySQL 中的许多数据完整性问题
系统检查发现了一些问题: 警告:?:(mysql.W002)未为数据库连接“默认”设置 MySQL 严格模式 提示:MySQL 的严格模式通过将警告升级为错误来修复 MySQL 中的许多数据完整性问题
我想在相同的 phonegap 应用程序中使用 android 数据库。 更多说明: 我创建了 phonegap 应用程序,但 phonegap 应用程序不支持服务,所以我们已经在 java 中为 a
Time Tracker function clock() { var mytime = new Date(); var seconds
我需要在现有项目上实现一些事件的显示。我无法更改数据库结构。 在我的 Controller 中,我(从 ajax 请求)传递了一个时间戳,并且我需要显示之前的 8 个事件。因此,如果时间戳是(转换后)
我有一个可以收集和显示各种测量值的产品(不会详细介绍)。正如人们所期望的那样,显示部分是一个数据库+建立在其之上的网站(使用 Symfony)。 但是,我们可能还会创建一个 API 来向第三方公开数据
我们将 SQL Server 从 Azure VM 迁移到 Azure SQL 数据库。 Azure VM 为 DS2_V2、2 核、7GB RAM、最大 6400 IOPS Azure SQL 数据
我正在开发一个使用 MongoDB 数据库的程序,但我想问在通过 Java 执行 SQL 时是否可以使用内部数据库进行测试,例如 H2? 最佳答案 你可以尝试使用Testcontainers Test
已关闭。此问题不符合Stack Overflow guidelines 。目前不接受答案。 已关闭 9 年前。 此问题似乎与 a specific programming problem, a sof
我正在尝试使用 MSI 身份验证(无需用户名和密码)从 Azure 机器学习服务连接 Azure SQL 数据库。 我正在尝试在 Azure 机器学习服务上建立机器学习模型,目的是我需要数据,这就是我
我在我的 MySQL 数据库中使用这个查询来查找 my_column 不为空的所有行: SELECT * FROM my_table WHERE my_column != ""; 不幸的是,许多行在
我有那个基地:http://sqlfiddle.com/#!2/e5a24/2这是 WordPress 默认模式的简写。我已经删除了该示例不需要的字段。 如您所见,我的结果是“类别 1”的两倍。我喜欢
我有一张这样的 table : mysql> select * from users; +--------+----------+------------+-----------+ | userid
我有表: CREATE TABLE IF NOT EXISTS `category` ( `id` int(11) NOT NULL, `name` varchar(255) NOT NULL
我是一名优秀的程序员,十分优秀!