python - 将抓取的 .csv 文件从 AWS EC2 导出到 AWS MYSQL 数据库

Question

我有一个 Python Scraper，我使用 Cron 在我的免费套餐 AWS EC2 实例中定期运行它，每天输出一个 csv 文件，其中包含大约 4-5000 行和 8 列。我已经从我的家庭 Ubuntu 操作系统上通过 ssh 连接到它，并将新数据添加到 SQLite 数据库中，然后我可以用它来提取我想要的数据。

现在我想尝试免费的 AWS MySQL 数据库，这样我就可以将数据库存储在云中，并从我家用 PC 上的终端中提取数据。我四处搜寻，发现没有关于如何完成此操作的直接教程。如果任何完成此操作的人能给我一个关于我需要采取的步骤的概念性想法，那就太好了。理想情况下，我希望在我的 EC2 实例使用新的 csv 表更新后立即自动更新数据库。一旦表位于 aws MySQL 数据库中，我就可以执行所有重复数据删除操作。

欢迎就此提供任何建议或教程链接。正如我所说，我已经搜索了很多指南，但没有找到任何相关内容。也许这个概念是完全错误的，并且有一种我没有看到的完全不同的方法？

Answer 1

问题是您无权访问 RDS 文件系统，因此无法在那里上传 csv(也无法导入)。

修改您的 Python Scraper 以直接连接到数据库并在那里插入数据。