gpt4 book ai didi

amazon-web-services - AWS Glue 的工作原理是什么?

转载 作者:行者123 更新时间:2023-12-04 03:55:23 25 4
gpt4 key购买 nike

我在 AWS Glue 上以 ETL 形式阅读了多篇文章。但我得到的不多。
有人能用简单的话解释一下 AWS Glue 的工作原理吗?它创建了 ENI,但它有什么用?我在某处读到 AWS Glue 作业在 AWS Glue 私有(private)子网中运行,这是真的吗?你能用架构图解释一下吗?还有为什么我们在创建 Glue 连接时需要提供 VPC?

最佳答案

为了使概念尽可能简单,请将 AWS Glue 视为 Spark,您可以在其中编写 Python/Scala 脚本来执行特定的数据处理任务,作为可以执行的作业,例如,使用 GlueContext 读取 CSV 文件的 Python 脚本来自 S3 存储桶并将其存储为 JSON。
关于网络和 VPC,您可以在 VPC 和 AWS Glue 之间建立私有(private)连接。您可以使用此连接使 AWS Glue 无需通过公共(public)互联网即可与您的 VPC 中的资源进行通信。使用 VPC,您可以控制网络设置,例如 IP 地址范围、子网、路由表和网络网关。
AWS Glue VPC Reference
AWS Glue 概念:
AWS Glue Concepts
AWS Reference

关于amazon-web-services - AWS Glue 的工作原理是什么?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/63989463/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com