将日期从毫秒转换为 ISODate 对象

IT技术 javascript mongodb type-conversion aggregation-framework
2021-03-19 04:29:26

我正在尝试按小时聚合 MongoDB 集合中的记录,并且需要将存储为时间戳(毫秒)的日期转换为 ISODate,以便我可以使用聚合框架的内置日期运算符($hour、$month 等)

记录存储为

{ 
"data" : { "UserId" : "abc", "ProjId" : "xyz"}, 
"time" : NumberLong("1395140780706"),
"_id" : ObjectId("532828ac338ed9c33aa8eca7") 
} 

我正在尝试使用以下类型的聚合查询:

db.events.aggregate(
    { 
       $match : { 
         "time" : { $gte : 1395186209804, $lte : 1395192902825 } 
       } 
    }, 
    { 
       $project : {
         _id : "$_id", 
         dt : {$concat : (Date("$time")).toString()} // need to project as ISODate
       } 
    },
    // process records further in $project or $group clause
)

产生以下形式的结果:

{
    "result" : [
        { 
            "_id" : ObjectId("5328da21fd207d9c3567d3ec"), 
            "dt" : "Fri Mar 21 2014 17:35:46 GMT-0400 (EDT)" 
        }, 
        { 
            "_id" : ObjectId("5328da21fd207d9c3567d3ed"), 
            "dt" : "Fri Mar 21 2014 17:35:46 GMT-0400 (EDT)" 
        }, 
            ... 
} 

我想从日期中提取小时、日、月和年,但由于时间是作为字符串向前投影的,因此我无法使用聚合框架的内置日期运算符($hour 等)。

如何将时间从毫秒转换为 ISO 日期以执行以下操作:

db.events.aggregate(
    {
        $match : { 
            "time" : { $gte : 1395186209804, $lte : 1395192902825 } 
        }
    },
    {
        $project : {
            _id : "$_id",
            dt : <ISO date from "$time">
        }
    },
    { 
        $project : {
            _id : "$_id",
            date : { 
                hour : {$hour : "$dt"} 
            }
        }
    }
)
5个回答

实际上,有可能,诀窍是使用类似于以下内容的语法将毫秒时间添加到零毫秒 Date() 对象:

dt : {$add: [new Date(0), "$time"]}

我从上面修改了你的聚合以产生结果:

db.events.aggregate(
    {
        $project : {
            _id : "$_id",
            dt : {$add: [new Date(0), "$time"]}
        }
    },
    { 
        $project : {
            _id : "$_id",
            date : { 
                hour : {$hour : "$dt"} 
            }
        }
    }
);

结果是(带有一个样本数据条目):

{
  "result": [
    {
      "_id": ObjectId("532828ac338ed9c33aa8eca7"),
      "date": {
        "hour": 11
      }
    }
  ],
  "ok": 1
}

我认为没有办法做到这一点。因为聚合框架是用本机代码编写的。不使用 V8 引擎。因此 JavaScript 的所有内容都不会在框架内工作(这也是聚合框架运行得更快的原因)。
Map/Reduce 是解决这个问题的一种方法,但聚合框架的性能肯定要好得多。

关于 Map/Reduce 性能,请阅读此线程

另一种解决方法是从聚合框架中获取“原始”结果,将其放入 JSON 数组中。然后通过运行 JavaScript 进行转换。有点像:

var results = db.events.aggregate(...);
reasult.forEach(function(data) {
    data.date = new Date(data.dateInMillionSeconds);
    // date is now stored in the "date" property
}
这已经有一段时间不正确了。看到这个其他答案
2021-05-03 04:29:26
感谢你的回复。我将尝试使用 part-Mongo/part-JS 解决方案。
2021-05-09 04:29:26

要返回一个有效的 BSON 日期,您只需要一个使用$add运算符的小日期“数学” 您需要添加new Date(0)到时间戳。new Date(0)表示自Unix纪元毫秒(1970年1月1日)的数量和为简写new Date("1970-01-01")

db.events.aggregate([
    { "$match": { "time": { "$gte" : 1395136209804, "$lte" : 1395192902825 } } },
    { "$project": { 
        "hour": { "$hour": { "$add": [ new Date(0), "$time" ] } }, 
        "day": { "$dayOfMonth":  { "$add": [ new Date(0), "$time" ] } },
        "month": { "$month": { "$add": [ new Date(0), "$time" ] } },
        "year": { "$year":  { "$add": [ new Date(0), "$time" ] } } 
    }} 
])

其中产生:

{
    "_id" : ObjectId("532828ac338ed9c33aa8eca7"),
    "hour" : 11,
    "day" : 18,
    "month" : 3,
    "year" : 2014
}

开始Mongo 4.0,有一个新的$toDate聚合运算符,它可以从各种类型转换为日期(在本例中为 long):

// { time: NumberLong("1395140780706") }
db.collection.aggregate({ $set: { time: { $toDate: "$time" } } })
// { time: ISODate("2014-03-18T11:06:20.706Z") }

并从中抽出时间:

// { time: NumberLong("1395140780706") }
db.collection.aggregate({ $project: { hour: { $hour: { $toDate: "$time" } } } })
// { hour: 11 }

使用这个 if {$add: [new Date(0), "$time"]} 函数返回string type不是ISO date type

我使用了所有这些选项,但仍然失败,因为我的新日期从$project返回一个string type喜欢的人'2000-11-2:xxxxxxx'date type喜欢ISO('2000-11-2:xxxxxxx')与我有同样问题的人使用这个。

db.events.aggregate(
    {
        $project : {
            _id : "$_id",
            dt : {$add: [new Date(0), "$time"]}
        }
    },
    { 
        $project : {
            _id : "$_id",
            "year": { $substr: [ "$dt", 0, 4 ] },
            "month": { $substr: [ "$dt", 5, 2] },
            "day": { $substr: [ "$dt", 8, 2 ] }
        }
    }
);

结果将是

 { _id: '59f940eaea87453b30f42cf5',
    year: '2017',
    month: '07',
    day: '04' 
},

你可以得到小时或分钟,如果你想这取决于string你想subset,那么你可以group说再根据同日,月或年