gpt4 book ai didi

SQL 查询 : Deleting rows from PostgreSQL with same values

转载 作者:行者123 更新时间:2023-11-29 13:18:18 24 4
gpt4 key购买 nike

<分区>

我有一个数据库,其中我设法获得了一些重复的行。

数据库包含以下值:

--------------------------------------------------------------
| id | did | sensorid | timestamp | data | db_timestamp |
--------------------------------------------------------------
| int | string | int | bigint | jsonb | bigint |
--------------------------------------------------------------

timestampdb_timestamp 是 unix 时间戳(自 1970 年 1 月 1 日 12:00:00 AM 以来的毫秒数)

我设法获得了很多重复值,我需要一种快速“丢弃”它们的方法。显示它们重复的值是 didsensoridtimestamp。这意味着如果我找到相同的行,那么它们就是重复的。

我已经进行了以下查询来查找重复项,现在我只需要了解如何删除它们。

SELECT did, sensorid, timestamp, COUNT(*)
FROM <db_name>
GROUP BY did, sensorid, timestamp
HAVING COUNT(*) > 1
ORDER BY sensorid, timestamp;

我的数据库包含将近 1.200.000.000 行并且我知道这些重复项太多了,因此我创建了一个 python 脚本来为我删除它们。然而,我设法发现使用我的 python 脚本并没有我需要的那么快,因此我希望使用 SQL 查询删除我的重复项可以凑合。

这是我上述查询的打印输出:

----------------------------------------------------
| did | sensorid | timestamp | count |
|"358188056470108"| 910 |1492487704000| 61 |
|"358188056470108"| 910 |1492487705000| 61 |
----------------------------------------------------

我知道可以使用 bigint 或类似的方法来提高性能,但有理由不这样做。

我想删除所有重复项,但重要的是我要保留其中一行,最好是 id 最低的行,这将成为“原始”行。

我希望这里有人可以帮助我创建这样的查询。

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com