gpt4 book ai didi

amazon-web-services - 使用自托管 Kafka 作为 AWS Lambda 的事件源

转载 作者:行者123 更新时间:2023-12-04 07:22:45 28 4
gpt4 key购买 nike

我想使用自托管(在 EC2 实例中)Kafka 流作为事件源来触发 lambda 函数。尽管 lamda 可以轻松配置( here )以从 Kafka 流触发,但我不想为所有消息触发,而仅在少数情况下触发。
我们可以在 Eventbridge 中使用模式匹配,但我们可以使用自托管的 Kafka 作为源吗?如果是,那么如何?

最佳答案

您需要在某处实现自定义过滤。我认为你最好的选择是使用 Kafka Streams找到您想要操作的相关消息,然后将它们发送到单独的主题。这是一个 article解释如何实现这一点。
我建议的其他替代解决方案是使用 AWS Kinesis 或自定义 kafka 使用者,但它们都遵循相同的概念:

  • 处理流。
  • 查找相关消息。
  • 将它们发送到其他地方(例如另一个 kafka 主题),这将是您的 lambda 的输入。
  • 关于amazon-web-services - 使用自托管 Kafka 作为 AWS Lambda 的事件源,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/68393508/

    28 4 0
    Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
    广告合作:1813099741@qq.com 6ren.com