javascript - 使用javascript在MongoDB中聚合查询试图将UTC字符串日期转换为Date对象

Question

我正在尝试按小时对日期时间进行分组，并且我正在从 json 文件上传数据。虽然日期时间是 UTC 格式的字符串。如何在 meteor 中使用 javascript 将它们转换为 Date 对象？

var data = Subjects.aggregate([{$match: no_null},
                  { $project: 
                    { bin: { $hour: new Date("$metrics."+metric") } 
                  } },
                  {$group: { _id: "$bin", count: {$sum: 1} } } ])

指标已经采用 UTC 格式。

这是一份文件。

{
    "metrics": {
      "ACT_04": 3.733333333, 
      "ACT_05": 14.5, 
      "ACT_02": "1970-01-01T05:02:30Z", 
      "ACT_03": 7.0833333329999997, 
      "ACT_01": "1970-01-01T20:03:00Z"
    }, 
    "subject_id": "M10965219", 
    "name": "sub-M10965219_Act"
  }

Answer 1

如果“字符串”采用“词汇”ISO 格式，如 “2018-05-15T20:59:31.502Z”，那么您“可以”获得 $substr部分:

Subjects.aggregate([
  { "$group": {
    "_id": { "$substr": ["$metrics."+metric,0,10] },
    "count": { "$sum": 1 }
  }}
])

如果您有可用的 MongoDB 3.6，那么您“可以”使用 $dateFromString实际将其转换为 BSON 日期格式，但您可能希望以类似的方式 chop 该字符串以用于您实际想要的任何日期舍入:

Subjects.aggregate([
  { "$group": {
    "_id": {
      "$dateFromString": {
        "dateString": { "$substr": ["$metrics."+metric,0,10] }
      }            
    },
    "count": { "$sum": 1 }
  }}
])

MongoDB 4.0 有 $toDate更短一点并进行相同的 BSON 日期转换:

Subjects.aggregate([
  { "$group": {
    "_id": {
      "$toDate": { "$substr": ["$metrics."+metric,0,10] }
    },
    "count": { "$sum": 1 }
  }}
])

但基本事实是，如果您的“字符串”实际上看起来不像那样，并且不能通过支持的运算符以一致的方式真正分解成字符串的各个部分，那么您通常最好转换存储在您的集合首先是实际的 BSON 日期。

此处“推荐”的做法是实际运行数据转换。 mongo shell 应该足以运行“一次性”转换:

var batch = [];

db.subjects.find().forEach(doc => {

  var fields = Object.keys(doc.metrics).map(k => ({
    ['metrics.'+k]: new Date(doc.metrics[k]),
  })).reduce((acc,curr) => Object.assign(acc,curr),{});

  batch.push({
    "updateOne": {
      "filter": doc._id",
      "update": { "$set": fields }
    }
  });

  if ( batch.length > 1000 ) {
     db.subjects.bulkWrite(batch);
     batch = []
  }
})

if ( batch.length > 0 ) {
  db.subjects.bulkWrite(batch);
  batch = [];
}

这是基本过程。当然，如果您的“字符串”不是 ISO 格式或任何适合传递给 Date() 进行转换的格式，那么您实际上需要采取其他措施。

至少 BSON 日期是一个 8 字节的数据结构，具有“内部”数字表示，作为等效的“字符串”，它至少有 24 个字节，甚至更长，并带有命名日和月的单词。在使用数据库时，以这种形式保留本质上本质上是“数字”的数据是有意义的。

我的建议是转换数据，并且可能在导入时转换，或者如果您无法解决，那么至少加载一次到集合中。最好尝试使用字符串来完成它们实际上不应该做的事情。

Note $substr is considered deprecated and actually now aliases $substrBytes, or you can use $substrCP depending on the actual encoding of the data. Older MongoDB releases before 3.2 have the $substr expression only.