database-design - MongoDB 存储大量指标/分析数据的方法

我们正计划使用 MongoDB 来存储大量分析数据,例如查看次数和点击次数。我不确定在 MongoDB 中构建文档以帮助查询和减小数据库大小的最佳方式。

我们需要根据页面名称、客户端和操作类型来记录操作。理想情况下,我们需要下降到年/月/日/小时级别的统计数据,我们不需要或关心每秒或每分钟的浏览量。虽然这个文档结构看起来不错,但我知道 100 个访问者会生成 100 个新文档。

{ 
  "_id" : ObjectId( "4dabdef81a34961506040000" ),
  "pagename" : "Hello",
  "action" : "view",
  "client" : "client-name",
  "time" : Date( "Mon Apr 18 07:49:28 2011" )
}

是否有这样做的最佳实践方法,或者使用 $inc或 Capped Collections ?

最佳答案

更新答案

在 mongo shell 中一起破解:

use pagestats;

// a little helper function
var pagePerHour = function(pagename) {
    d = new Date();
    return {
        page : pagename,
        year: d.getUTCFullYear(),
        month: d.getUTCMonth(),
        day : d.getUTCDate(),
        hour: d.getUTCHours(),
    }
}

// a pageview happened
db.pagestats.update(
    pagePerHour('Hello'),
    { $inc : { views : 1 }},
    true ); //we want to upsert

// somebody tweeted our page twice!
db.pagestats.update(
    pagePerHour('Hello'),
    { $inc : { tweets : 2 }},
    true ); //we want to upsert

db.pagestats.find();
// { "_id" : ObjectId("4dafe88a02662f38b4a20193"),
//   "year" : 2011, "day" : 21, "hour" : 8, "month" : 3,
//   "page" : "Hello",
//   "tweets" : 2, "views" : 1 }

// 24 hour summary 'Hello' on 2011-4-21
for(i = 0; i < 24; i++) {
    //careful: days (1-31), month (0-11) and hours (0-23)
    stats = db.pagestats.findOne({ page: 'Hello', year: 2011, month: 3, day : 21, hour : i})
    if(stats) {
        print(i + ': ' + stats.views + ' views')
    } else {
        print(i + ': no hits')
    };
}

根据您要跟踪的方面,您可能会考虑添加更多集合(例如,用于以用户为中心的跟踪的集合)。希望对您有所帮助。

另请参阅

Blogpost about Analytics Data

https://stackoverflow.com/questions/5712698/

相关文章:

java - 指定字段对于 MongoDB 是 transient 的,但对于 RestContro

node.js - 聊天项目 - 使用 socket.io 进行负载平衡

python - 我可以只获取 Cursor 对象(pymongo)中的第一项吗?

node.js - Mongoose,查找,返回特定属性

node.js - 将数据插入 MongoDB - 没有错误,没有插入

javascript - Mongoose:需要验证错误路径

javascript - Meteor Collection 文档 ID : Random. id(

python - django 和 mongodb 是否使迁移成为过去?

mongodb - 比较两个集合的 mongo 差异

java - 如何使用 Java 对 MongoDB 中的文档进行批量更新?