mysql - 将大数据集加载到 MySQL 表中

Question

我想开始修补大型政府数据集——特别是，我想使用 campaign contribution records和 lobbying disclosure records .阳光基金会和响应政治中心提供 cleaned-up versions这些数据集可供下载。

我想将这些数据集加载到 MySQL 表中，因为 MySQL 是我最熟悉的数据库管理系统。

我有两个问题:

1. 将这些大型 CSV 文件加载到 MySQL 表中的最佳方法是什么？
2. 是否有更好的方法将这些数据集加载到数据库中并运行查询？我应该考虑使用不同的数据库平台吗？我对其他选择持开放态度，但我不知道从哪里开始。现在，我只打算执行本地查询，但在某些时候我想构建一个公共(public) Web 应用程序。

Answer 1

要回答您的第一个问题，请尝试使用 MySQL 的 LOAD DATA INFILE命令。这种类型的数据加载通常非常快。