个人中心
文章发布
退出
作者热门文章
- html - 出于某种原因，IE8 对我的 Sass 文件中继承的 html5 CSS 不友好？
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景？
34
4
使用 python 脚本查询 AWS Athena 架构时，pyathena 或 boto3 哪一个更快？
目前我正在使用 pyathena 来查询 Athena 模式，但它非常慢，我知道还有 boto3 的另一个选项，但在开始之前需要一些专家的建议。
最佳答案
查看dependencies for PyAthena你可以看到它实际上有一个boto3的依赖。
除非 PyAthena 为其库添加了大量开销(这不太可能)，否则您可能看到的最佳性能改进将取决于您如何使用 Athena 本身。
您可以进行许多性能改进，亚马逊发布了名为Top 10 Performance Tuning Tips for Amazon Athena的博客这将有助于提高查询的性能。
关于python - 查询 Athena : pyathena or boto3? 哪一个更快，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/64291515/
34
4
0
from pyathena import connect import pandas as pd conn = connect(aws_access_key_id='YOUR_ACCESS_KEY_I
我需要处理存储桶 S3 中特定文件夹中特定流的一些数据。我想在 Python 中执行此操作。经过一段时间的搜索，我发现了库 PyAthena 这正是我正在寻找的! 我安装了 PyAthena 版本 1
我是 AWS 新手。我有一个用户帐户和两个角色，一个用于生产，一个用于测试。 通常我会登录我的帐户并切换到产品角色来运行一些简单的选择查询。 现在我想通过 PyAthena 在 Python 中本地使
使用 python 脚本查询 AWS Athena 架构时，pyathena 或 boto3 哪一个更快？ 目前我正在使用 pyathena 来查询 Athena 模式，但它非常慢，我知道还有 bot
使用 python 脚本查询 AWS Athena 架构时，pyathena 或 boto3 哪一个更快？ 目前我正在使用 pyathena 来查询 Athena 模式，但它非常慢，我知道还有 bot
此查询在 Athena 的前端运行良好: SELECT * FROM analysisdata."iris" limit 10; 我正在使用此 Python 代码通过 Python/pyathena
我有一个查询，通过扫描 90GB 数据，在 43 秒内(直接)在 Athena 上运行。然后，我使用 pyathena 运行相同的查询(我在 EMR 上的 jupyter 笔记本中使用它)，但它只是没
我是一名优秀的程序员,十分优秀！