mongodb - 嵌入式文档的汇总平均值-6ren

mongodb - 嵌入式文档的汇总平均值

转载作者：可可西里更新时间：2023-11-01 10:28:12

我的文档结构如下所示:

{
    "_id" : ObjectId("52517d9e6e0af435ddd48219"),
    "date" : ISODate("2013-10-06T18:11:26.329Z"),
    "engines" : {
        "ahnlab" : {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "ahnlab",
            "node_name" : "",
            "status" : 1,
            "task_id" : "7fac4f67-2bde-49de-980a-4f7fa1d46db7",
            "threat" : "EICAR_Test_File"
        },
        "avast" : {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "avast",
            "node_name" : "",
            "status" : 4,
            "task_id" : "fdce50e9-9bf3-4cc9-91a4-b674a108d478",
            "threat" : ""
        },
        "avg" : {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "avg",
            "node_name" : "",
            "status" : 1,
            "task_id" : "4bdb4a37-80ab-4631-8587-edcbde7e2592",
            "threat" : "EICAR_Test"
        },
        "avira" : {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "avira",
            "node_name" : "",
            "status" : 4,
            "task_id" : "43b43bab-ff67-440c-9919-f6241ccaf539",
            "threat" : ""
        },
        "bitdefender" : {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "bitdefender",
            "node_name" : "",
            "status" : 4,
            "task_id" : "ba7efe74-ef93-465f-b6c3-6c4fc746934d",
            "threat" : ""
        },
        "comodo" : {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "comodo",
            "node_name" : "",
            "status" : 4,
            "task_id" : "831d2dc8-704b-4eb7-9a75-9a0364a8ab09",
            "threat" : ""
        },
        "drweb" : {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "drweb",
            "node_name" : "",
            "status" : 4,
            "task_id" : "ebb758c3-9146-4a99-b36f-0fb6ee024a33",
            "threat" : ""
        },
        "f-prot" : {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "f-prot",
            "node_name" : "",
            "status" : 4,
            "task_id" : "13590a25-ac0d-4b1b-b93e-bc715009432a",
            "threat" : ""
        },
        "forticlient" : {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "forticlient",
            "node_name" : "",
            "status" : 4,
            "task_id" : "",
            "threat" : ""
        },
        "kaspersky" : {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "kaspersky",
            "node_name" : "",
            "status" : 4,
            "task_id" : "",
            "threat" : ""
        },
        "malwarebytes" : {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "malwarebytes",
            "node_name" : "",
            "status" : 4,
            "task_id" : "a97f3d9a-d6a9-44df-8355-c053e9f4980a",
            "threat" : ""
        },
        "mcafee" : {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "mcafee",
            "node_name" : "",
            "status" : 1,
            "task_id" : "e7a592bb-84fc-4c47-a1ed-3719874b19cc",
            "threat" : "EICAR test file"
        },
        "msessentials" : {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "msessentials",
            "node_name" : "",
            "status" : 4,
            "task_id" : "01c9fb71-155a-473d-b45c-91fa117ae649",
            "threat" : ""
        },
        "nod32" : {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "nod32",
            "node_name" : "",
            "status" : 4,
            "task_id" : "a715cc8f-0e2f-4698-b883-a35fa6add13e",
            "threat" : ""
        },
        "norman" : {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "norman",
            "node_name" : "",
            "status" : 4,
            "task_id" : "29da2955-0674-45d2-ac4d-c0b3ea401cba",
            "threat" : ""
        },
        "norton" : {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "norton",
            "node_name" : "",
            "status" : 4,
            "task_id" : "c4cd1e3e-2f0d-4bf6-84cf-ab0962f7f4ed",
            "threat" : ""
        },
        "panda" : {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "panda",
            "node_name" : "",
            "status" : 4,
            "task_id" : "b0888f7c-e4a4-4b4e-b163-21d283e166f1",
            "threat" : ""
        }
    },
    "expiration_date" : ISODate("2013-10-06T18:11:36.329Z"),
    "file_name" : "ffgtr.exe",
    "scan_status" : "DONE",
    "task_id" : "4ce4ae9e-ef0a-476a-8189-92a5bfe328bd"
}

我想通过聚合来投影每个引擎的“日期”和“定义”字段。(“定义”是一个嵌入式字段)

只有我指定了特定的引擎，我才成功地做到了:

cursor = collection.aggregate([
    { "$match": { "date": { "$gte": startdate } } },
    {'$project': { "def": "$engines.avast.definitions","date":1,"_id": 0 }}
], allowDiskUse=True)

但我想在不指定特定引擎的情况下对所有引擎运行查询，例如:

cursor = collection.aggregate([
    { "$match": { "date": { "$gte": startdate } } },
    {'$project': { "def": "$engines.$elemMatch.definitions","date":1,"_id": 0 }}
], allowDiskUse=True)

(这是行不通的)

我想要找到的是“日期”和每个引擎类型的每个“引擎”定义日期之间的平均差异。

最佳答案

这里的主要问题是数据的结构。为了使用聚合框架并愉快地使用大多数其他 MongoDB 查询操作和索引实践，那么您的数据应该像这样构造。

{
    "_id" : ObjectId("52517d9e6e0af435ddd48219"),
    "date" : ISODate("2013-10-06T18:11:26.329Z"),
    "engines" : [
        {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "ahnlab",
            "node_name" : "",
            "status" : 1,
            "task_id" : "7fac4f67-2bde-49de-980a-4f7fa1d46db7",
            "threat" : "EICAR_Test_File"
        },
        {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "avast",
            "node_name" : "",
            "status" : 4,
            "task_id" : "fdce50e9-9bf3-4cc9-91a4-b674a108d478",
            "threat" : ""
        },
        {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "avg",
            "node_name" : "",
            "status" : 1,
            "task_id" : "4bdb4a37-80ab-4631-8587-edcbde7e2592",
            "threat" : "EICAR_Test"
        },
        {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "avira",
            "node_name" : "",
            "status" : 4,
            "task_id" : "43b43bab-ff67-440c-9919-f6241ccaf539",
            "threat" : ""
        },
        {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "bitdefender",
            "node_name" : "",
            "status" : 4,
            "task_id" : "ba7efe74-ef93-465f-b6c3-6c4fc746934d",
            "threat" : ""
        },
        {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "comodo",
            "node_name" : "",
            "status" : 4,
            "task_id" : "831d2dc8-704b-4eb7-9a75-9a0364a8ab09",
            "threat" : ""
        },
        {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "drweb",
            "node_name" : "",
            "status" : 4,
            "task_id" : "ebb758c3-9146-4a99-b36f-0fb6ee024a33",
            "threat" : ""
        },
        {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "f-prot",
            "node_name" : "",
            "status" : 4,
            "task_id" : "13590a25-ac0d-4b1b-b93e-bc715009432a",
            "threat" : ""
        },
        {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "forticlient",
            "node_name" : "",
            "status" : 4,
            "task_id" : "",
            "threat" : ""
        },
        {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "kaspersky",
            "node_name" : "",
            "status" : 4,
            "task_id" : "",
            "threat" : ""
        },
        {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "malwarebytes",
            "node_name" : "",
            "status" : 4,
            "task_id" : "a97f3d9a-d6a9-44df-8355-c053e9f4980a",
            "threat" : ""
        },
        {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "mcafee",
            "node_name" : "",
            "status" : 1,
            "task_id" : "e7a592bb-84fc-4c47-a1ed-3719874b19cc",
            "threat" : "EICAR test file"
        },
        {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "msessentials",
            "node_name" : "",
            "status" : 4,
            "task_id" : "01c9fb71-155a-473d-b45c-91fa117ae649",
            "threat" : ""
        },
        {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "nod32",
            "node_name" : "",
            "status" : 4,
            "task_id" : "a715cc8f-0e2f-4698-b883-a35fa6add13e",
            "threat" : ""
        },
        {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "norman",
            "node_name" : "",
            "status" : 4,
            "task_id" : "29da2955-0674-45d2-ac4d-c0b3ea401cba",
            "threat" : ""
        },
        {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "norton",
            "node_name" : "",
            "status" : 4,
            "task_id" : "c4cd1e3e-2f0d-4bf6-84cf-ab0962f7f4ed",
            "threat" : ""
        },
        {
            "definitions" : ISODate("2000-01-01T00:00:00.000Z"),
            "name" : "panda",
            "node_name" : "",
            "status" : 4,
            "task_id" : "b0888f7c-e4a4-4b4e-b163-21d283e166f1",
            "threat" : ""
        }
    ],
    "expiration_date" : ISODate("2013-10-06T18:11:36.329Z"),
    "file_name" : "ffgtr.exe",
    "scan_status" : "DONE",
    "task_id" : "4ce4ae9e-ef0a-476a-8189-92a5bfe328bd"
}

然后使用该结构就像处理 $unwind 一样简单然后是 $group为您的结果:

db.collection.aggregate([
    { "$unwind": "$engines" },
    { "$group": {
        "_id": "$engines.name",
        "avgInterval": { "$avg": {
            "$subtract": [ "$date", "$engines.definitions" ]
        }}
    }}
])

两个日期对象之间的差异将以毫秒为单位。

否则，您将无法使用带有 mapReduce 的 JavaScript 遍历代码中的对象键:

db.collection.mapReduce(
    function() {
        var doc = this;
        Object.keys(doc.engines).forEach(function(key) {
            emit( key, 
                ( doc.date.valueOf() - 
                    doc.engines[key].definitions.valueOf())
            );
        })
   },
   function(key,values) { 
       return ( Array.sum(values) / values.length );
   },
   { "out": { "inline": 1 } }
);

两者都会为您提供集合或其他查询输入中每个引擎“名称”的平均值。

尝试更改结构，因为它更适合您的持续需求并提供更快的处理速度。

关于mongodb - 嵌入式文档的汇总平均值，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/31228608/

文章推荐： node.js - 在单独的 ec2 实例上连接到 mongodb

文章推荐： c++ - 防止在 _popen 上打开命令行

文章推荐： windows - 通过检查注册表查明是否安装了 IIS

文章推荐： javascript - Angular 似乎没有运行

Java 汇总
我怎样才能将 numberGrade 的值调高，如果它是 89.5，它会变成 90。numberGrade 被当作 double ，但将它设为 int 并不会向上或向下舍入。 public class
嵌入式移植docker报错问题(汇总)
经过了漫长时间的移植和查询资料，得以解决一下嵌入式docker出现的问题，很多网上的资料全都是复制粘贴复制粘贴，找不到合适的解决方法让人很是苦恼，希望自己总结出的一些解决问题的经验给广大朋友减少一些
javascript - 汇总 - 导入外部库
之前我是通过脚本来使用库的: 现在我使用 yarn 和 rollup 来构建带有下一个文件的项目。包.json: { "name": "maplib", "version": "1.0.0",
r - 快速滚动平均值 + 汇总
在 R 中，我正在尝试使用不同的窗口宽度对大向量(最多 400k 个元素)进行非常快速的滚动平均值，然后对于每个窗口宽度按每年的最大值汇总数据。下面的例子希望是清楚的。我尝试了几种方法，到目前为止最
javascript - “汇总”未被识别为内部或外部命令
我想问一下我应该如何解决这个问题，因为我已经对这部分感到困惑和困惑。我已经使用这个命令全局安装了汇总 npm install --global rollup 但是，当我尝试运行“汇总”命令时，我应该期
javascript - 获取库中的文件(汇总)
我正在构建 javascript 库(更像是小部件)，其中将包含一些 UI。我正在通过 javascript 向 DOM 添加 HTML 元素。要添加此 HTML，我有以下代码: async inse
sql - 将天数分组为单行(汇总)
我在显示一份报告时遇到了一些困难，该报告既可以将所有日期分组到月中，又可以对月中每天的“支出”求和。我的 SQL 查询创建了这个:(检索所有日期) Date
angular - 汇总 commonjs
我正在从事 Angular2 项目。我浏览了 Angular2 aot 文档并且能够生成 ngFactory 文件。我按照文档中的建议使用了 rollup js。我有一些非 es6 npm 包。我已经
angular - 汇总 - 命名空间冲突
我目前正在构建 Ionic 2-RC3 应用程序。但是自从我升级到 RC-1 后，我遇到了以下错误:(不确定它们是否保持不变，但你明白了)。 [15:16:17] rollup: Conflicti
android 支持的语言列表(汇总)
Arabic, Egypt (ar_EG) -----------------------------阿拉伯语，埃及 Arabic, Israel (ar_IL) -----------------
iife - 汇总 : globals & external
我正在尝试汇总我的完全 es6 模块存储库，该存储库具有项目的本地导入/导出，以及对也是脚本或模块的依赖项的导入。我也在尝试进行双重构建，通过汇总创建遗留的 iife 模块。这仅适用于我的项目，没
linq - 汇总 VBA 集合中的记录
我有一个由 DayTots 类对象组成的 VBA 集合(见下文) 我正在使用 For Each 遍历集合以创建一个由汇总记录组成的新集合，基于日期有什么方法可以用 Linq 做到这一点吗？我怀疑也
rollup - 错误无法解析入口模块 (watch) - 汇总
这是我第一次尝试理解/使用汇总。我正在使用 this boilerplate因为它都是基于three.js，我也喜欢使用它。到目前为止，我目前的(几乎肯定是不正确的)方法是: 从github下载样
sql - 汇总 column_property 值
我有两个 column_property 列，我想在 grandtotal 列中将它们加在一起。我希望能够根据 grandtotal 列进行排序和过滤。如何对 subtotal 和 shipping
typescript - 汇总 typescript 装饰器支持
我收到以下错误消息: Error: Parse Error: Line 29: Unexpected token ILLEGAL 对应的代码行是 mobx 观察者装饰器: @observer clas
php - 汇总 WooCommerce 订单中按产品类别订购的产品数量
我真的坚持这一点，我真的很感激这方面的任何帮助。目标是计算 Woocommerce 订单上每个类别中的项目数量，以便每个部分都可以以类别名称和产品数量为标题。例如: 汉堡 x 5 在此下方将是该订单
sql - 更高效的SQLite触发器来“汇总”多行
我正在从路由器收集传输数据；它提供每日，每月和每两分钟（间隔为120秒）的摘要。如果我在一天中（因此一个月中）重启路由器，则这些报告将不完整。但是，我仍然会得到间隔数据，并且可以对引导前后的记录进行汇
python - 汇总 DataFrame 行和列
假设我有一个像这样的数据框: a b c d e f 1. 1 5 5 9 2 3 2. 4 7 3 1 4 6 3. 2 3 8 9
haskell - 汇总 Haskell 记录列表
假设我有一个记录列表，我想通过取中位数来总结它。更具体地说，说我有 data Location = Location { x :: Double, y :: Double } 我有一个测量列表，我想将
angularjs - 汇总 Controller 中包含的所有项目
我刚刚开始使用 AngularJS。我需要从 AngularJS 的书中升级这个购物车示例，以便所有 (items.price*item.quantity) 的总数显示在页面底部。实现它的推荐方法是什

可可西里

个人简介

我是一名优秀的程序员,十分优秀！

作者热门文章

滴滴打车优惠券免费领取

全站热门文章

首页

博学

6Ren·AI

商城

mongodb - 嵌入式文档的汇总平均值