python - 在Python中读取.dss数据库文件

Question

我有一个 DSS 数据库文件，我想使用 Python 从该文件中提取数据库架构。我实际上需要对此数据库执行查询，但我找不到任何好的文档来开始。所以，我决定如果我可以提取模式，我可以创建一个 SQLite 数据库并在那里运行我的实验。

文件内容如下:

5a44 5353 8854 0000 6e04 0000 0700 0000
362d 5146 14a2 2001 85a9 8c00 3037 4a55
4c31 3400 3330 4e4f 5631 3700 3132 3a35
393a 3134 0000 0000 0010 0000 0100 0000
2000 0000 0500 0000 7f00 0000 df10 0000
...  ...  ...  ...
...  ...  ...  ...

注意。我对DSS数据库不熟悉。

如有任何帮助，我们将不胜感激。

Answer 1

DSS 或 HEC-DSS是由美国陆军工程兵团水文工程中心(HEC)开发的数据库系统。它不是关系数据库，而是旨在更有效地检索和存储大量数据的数据库，这些数据不一定与其他数据集互连。 HEC-DSS 支持时间序列数据、配对数据(如 pandas DataFrame)、面向空间的网格数据等数据类型。 HEC-DSS 通过路径名引用数据集或记录。路径名分为六个部分，并标记为“A”到“F”为/A/B/C/D/E/F/。 HEC-DSS被纳入HEC的主要项目，如HEC-RAS、HEC-HMS、HEC-RTS等。

HEC发布了Java库和基于Java的可视化实用程序HEC-DSSVue查看、编辑或操作 HEC-DSS。 Java 库可以在 Jython 中使用，但是 Jython 缺少 numpy、pandas、matplotlib 等流行的科学库。所以我开始研究pydsstools ，HEC-DSS 的 python 库，于 2017 年底推出。目前，pydsstools 支持主要的 HEC-DSS 数据类型和基本的复制、删除操作，并可在 Windows 和 Ubuntu 等发行版中运行。以下 python 代码是读取和绘制时间序列数据的示例:

from pydsstools.heclib.dss import HecDss
import matplotlib.pyplot as plt
import numpy as np

dss_file = "example.dss"
pathname = "/REGULAR/TIMESERIES/FLOW//1HOUR/Ex1/"
startDate = "15JUL2019 19:00:00"
endDate = "15JUL2019 21:00:00"

with HecDss.Open(dss_file) as fid:
    ts = fid.read_ts(pathname,window=(startDate,endDate),trim_missing=True)
    times = np.array(ts.pytimes)
    values = ts.values
    plt.plot(times[~ts.nodata],values[~ts.nodata],"o")
    plt.show()

GitHub 中 pydsstools 存储库的 README 部分提供了操作其他数据类型(配对数据、网格数据)的示例。