- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我对 DynamoDB 上查询/扫描的限制
有疑问。
我的表有 1000 条记录,对所有记录的查询返回 50 个值,但是如果我将 Limit
设置为 5,这并不意味着查询将返回前 5 个值,它只是说查询表上的 5 个项目(以任何顺序排列,因此它们可能是非常旧的项目或新项目),所以我可能在查询中得到 0 个项目。如何实际获取查询的最新 5 项?我需要将 Limit
设置为 5(数字是示例),因为查询/扫描比这更多的项目会很昂贵。
查询有这个输入
{
TableName: 'transactionsTable',
IndexName: 'transactionsByUserId',
ProjectionExpression: 'origin, receiver, #valid_status, createdAt, totalAmount',
KeyConditionExpression: 'userId = :userId',
ExpressionAttributeValues: {
':userId': 'user-id',
':payment_gateway': 'payment_gateway'
},
ExpressionAttributeNames: {
'#valid_status': 'status'
},
FilterExpression: '#valid_status = :payment_gateway',
Limit: 5
}
我的表的索引是这样的:
我是否应该使用第二个索引或其他东西,用 createdAt
字段对它们进行排序,但是我如何确定查询会查看所有项目?
最佳答案
if I put a Limit of 5, that doesn't mean that the query will return the first 5 values, it just say that query for 5 Items on the table (in any order, so they could be very old items or new ones), so it's possible that I got 0 items on the query. How can actually get the latest 5 items of a query?
您的观察是正确的,不幸的是,没有Query
选项或任何其他操作可以保证单个请求中有 5 个项目。要理解为什么会这样(这不仅仅是亚马逊方面的懒惰),请考虑以下极端情况:您有一个包含 10 亿个项目的庞大数据库,但是执行一个非常具体的查询,其中只有 5 个匹配项目,现在进行请求您想要的:“还我 5 件元素”。这样的请求需要读取包含十亿项的整个数据库,然后才能返回任何内容,届时客户端肯定会放弃。所以这不是 DyanmoDB 的 Limit
的工作方式。它限制了 DyanamoDB 在响应之前需要完成的工作量。因此,如果 Limit = 100
,DynamoDB 将在内部读取 100 个项目,这需要一定的时间。但是你是对的,你不知道它会响应 100 个项目(如果所有项目都匹配过滤器)还是 0 个项目(如果没有一个匹配过滤器)。
因此,为了高效地完成您想做的事情,您需要考虑一种不同的方式来对您的数据进行建模 - 即,如何组织分区和排序键。有不同的方法可以做到这一点,每个都有自己的优点和缺点,你需要自己考虑你的选择。既然您询问了 GSI,我会给您一些关于如何使用该选项的提示:
您要查找的模式称为 filtered data retrieval .如您所述,如果您使用排序键 createdAt
执行 GSI,您可以首先检索最新的项目。但是你仍然需要做一个过滤器,并且仍然不知道如何在 5 个过滤结果(而不是 5 个预过滤)结果后停止。解决方案是要求 DynamoDB 仅首先将通过过滤的项目放入 GSI。在您的示例中,您似乎总是使用相同的过滤器:“status = payment_gateway”。 DynamoDB 在构建 GSI 时没有运行通用过滤器功能的选项,但它有一个不同的技巧来实现同样的事情:任何时候设置“status = payment_gateway”,同时设置另一个属性“status_payment_gateway” ,当状态设置为其他内容时,删除“status_payment_gateway”。现在,使用“status_payment_gateway”作为分区键 创建 GSI。 DynamoDB 只会将具有此属性的项目放入 GSI,从而准确实现您想要的过滤。
您还可以通过将分区键属性设置为多个不同的值,在一个 GSI 中拥有多个互斥的过滤条件,然后您可以分别对这些值中的每一个执行查询
(使用 KeyConditionExpression
).
关于amazon-dynamodb - DynamoDB 查询限制,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/63680861/
我正在使用 Boto3 和 Python 开发 Dyanamodb。我发现的问题之一是我们应该何时使用 dynamodb.client、dynamodb.resource 和 dynamodb.Tab
DynamoDB documentation描述了表分区原则上是如何工作的,但它对细节(即数字)非常了解。 DynamoDB 表分区究竟如何以及何时发生? 最佳答案 我找到了这个 presentati
我在 DynamoDB 表中有一个项目。该项目看起来像这样: { data: [ 1, 2, 3, 4, 5, 6 ] more_data: [ 2, 3, 4, 5, 6, 7 ] } 使用
我的 DynamoDB 表中的一个属性是一个名为 REQUEST_IDS 的列表,我想在更新项目之前检查该列表的长度以查看它是否满足条件(小于 10) .如何在 nodejs 的 ConditionE
我正在使用 Amazon Dynamodb,但没有太多经验。我有这样的价格表: 编号 |插入日期 |产品名称 |店名 |价格 相同的商店名称和产品名称可以有不同的值(价格和插入日期可能不同)。例如 i
我对 DynamoDB 上查询/扫描的限制有疑问。 我的表有 1000 条记录,对所有记录的查询返回 50 个值,但是如果我将 Limit 设置为 5,这并不意味着查询将返回前 5 个值,它只是说查询
我需要在 jsp 上显示最大计数为 10 的搜索结果,并且它应该有一个分页来作为分页功能来回遍历。 Dynamodb 有一个 最后评估 key ,但返回上一页无济于事,尽管我可以通过 移动到下一个结果
我是 CouchDB 的忠实粉丝,并且完全爱上了每个文档发出不止一次的 map 函数。我想知道在 DynamoDB 中是否可以通过使用字符串或数字集类型作为散列和范围主键的一部分(作为散列或范围属性)
我目前正在使用 DynamoDB。如果该记录的日期早于新记录日期字段,我想使用条件写入来更新记录。 有没有办法比较条件写入的 DateTime 类型?还是目前仅适用于整数、字符串和流? 谢谢。 最佳答
如何对 dynamoDB 表建模以构建一个标签系统,其中产品可以分配多个标签,并且我们应该能够过滤具有特定标签或标签集合的产品集,并获取分配给给定标签的所有标签产品? 我考虑过有一张 table :
我试图更好地理解在 AWS DynamoDB 中使用邻接列表模式进行多对多 (m:n) 关系设计。 在此处查看 AWS 文档:https://docs.aws.amazon.com/amazondyn
我怀疑 DynamoDB 中的这一说法是否属实或我的理解不正确。它说, ProvisionedThroughputExceededException 消息:您超出了表或一个或多个全局二级索引的最大允许
考虑一个 DynamoDB 表,它由一个主键和两个描述开始日期和结束日期的属性组成。如何在不扫描整个表的情况下查询时间范围是否与表中的时间范围重叠? 例子: 发电机表有两条记录 PK Start
我有一个 DynamoDB 表,其中包含将由许多应用程序读取的键值对。在启动时,每个应用程序将读取整个表并将其缓存在内存中。 我试图解决的问题是,如果 DynamoDB 表中的一个或多个项目已被修改,
我正在有条件地更新 dynamoDB 记录(仅当记录具有其属性之一的特定值时)。无论是否成功更新(条件是否满足),我都想取回记录。 docClient.update(params, function(
我目前正在对 DynamoDB 进行批量加载并将我们的数据项划分为批处理单元: 根据限制文件: https://docs.aws.amazon.com/amazondynamodb/latest/AP
我正在跟踪dynamodb的Python教程,以在端口8000上设置本地dynomodb http://docs.aws.amazon.com/amazondynamodb/latest/gettin
我正在创建一个 DynamoDB 表来保存与单个对象关联的注释。 评论在特定时间发布到对象,我使用发布的时间作为范围,因此评论可以按时间降序排序。我有发布评论的用户的 userId 的全局二级索引,这
我正在运行一个简单的 api,它在每次调用时从 dynamodb 表中获取一个项目,我将自动缩放设置为最小值 25 和最大值 10 000。 但是,如果我使用 wrk 或 hey 之类的工具发送 15
我在模型中有一个字段已声明为字符串,如下所示: App.Student= DS.Model.extend({ name: DS.attr('string'), address1: DS.attr('s
我是一名优秀的程序员,十分优秀!