如何处理一对多关系中的嵌套 mongoose 查询和异步问题?

Posted

技术标签:

【中文标题】如何处理一对多关系中的嵌套 mongoose 查询和异步问题?【英文标题】:How do I deal with nested mongoose queries and async issues in my one-to-many relationship? 【发布时间】:2017-06-19 09:30:02 【问题描述】:

我正在尝试从数据库中查询所有帖子,然后获取属于每个帖子的所有 cmets,并将整个内容发送回前端进行显示。到目前为止,我的策略一直是使用嵌套的 Mongoose 查询(请参阅下面的伪代码和实际代码示例),并且由于异步问题而得到了一些意想不到的结果。

谁能告诉我哪里出错了,或者是否有更好的方法来完成我想要完成的工作:

我的架构:

我在 Mongoose 中有三个 Schemas

    用户架构 (User) PostSchema (Post) CommentSchema (PostComment)

我在这里只包含了CommentSchema,以简化我的问题:

var CommentSchema = new mongoose.Schema (
    
        message: 
            type: String,
            minlength: [2, 'Your comment must be at least 2 characters.'],
            maxlength: [2000, 'Your comment must be less than 2000 characters.'],
            required: [true, 'You cannot submit an empty comment.'],
            trim: true,
        , // end message field
        userID: 
            type: mongoose.Schema.Types.ObjectId,
            ref: 'User'
        ,
        username: 
            type: String,
        ,
        postID: 
            type: mongoose.Schema.Types.ObjectId,
            ref: 'Post'
        ,
    ,
    
        timestamps: true,
    
);

创建新评论时,帖子的_id 会记录到评论的.postID 字段中。

我的伪代码策略:

// query for all posts using a mongoose promise
// run a `for loop` through the array returned posts
    // query my comments collection for any comments pertaining to post[i]
        // attach comments returned to the post[i]
        // push post[i] into a new array (now with comments attached)
        // check if on last run through array
            // res.json the new array back to the front end 
            // On front end just iterate through each post and its contained comments.

但是,当我尝试这种策略时,我在 for 循环中的第二个 Mongoose 查询遇到了一些异步问题。

我的实际代码示例:

Post.find() // first query
    .then(function(allPosts) 
        for (var i = 0; i < allPosts.length; i++) 
            _post = allPosts[i];
            console.log(_post, i);
            PostComment.find(postID: _post._id) // **nested query
                .then(function(comments) 
                    console.log(
                        post: _post,  // this value will not match the console log above (outside of the query)
                        index_value: i, // this value too will be out of match with the console log above
                        comments: comments,
                    );
                    // attach new comment to allPosts[i]
                    // push post with comment attached to new array
                    // check if on last iteration, if so res.json new array
                )
                .catch(function(err) 
                    console.log(err);
                )
         
    .catch(function(err) 
        console.log(err);
    

上述代码示例的问题:

在上面的示例中,在第二个查询中,**nested queryi_post 的值在从 mongoose 承诺(.then)返回数据时不同步。 for 循环的进度比返回的数据快。因此,如果我尝试将任何 cmets 附加到父帖子对象 (_post),则该变量已经与 for 循环的进程不同步(_post 现在成为数组中的下一个帖子)。我很难解决如何解决这个问题并从每个帖子中获取我所有的 cmets,并将其捆绑在一起作为前端。我只是在这一点上感到困惑。

期望的行为:

我想要一个包含所有帖子的填充列表,每个帖子都附有 cmets,以便在前端更轻松地迭代它们。这样在前端,所有帖子都显示在其下方,并带有各自的 cmets。

结论:

我做错了什么?我如何遍历我的所有帖子,并为每个帖子获取所有 cmets,并使其在 Angular 中的前端显示中保持整洁?在我的查询中,我的方法是错误的还是太“昂贵”?有没有更好的方法来实现我想要的行为?

感谢您超越的任何见解或帮助!我四处搜索希望看到另一个这样的问题,并且在这个问题上已经有一段时间了=)

【问题讨论】:

【参考方案1】:

我想出了如何做到这一点。我确实必须对我的模式进行一些更改。因为 Mongo 不允许连接,所以我们可以改用 populate() Mongoose 方法 (http://mongoosejs.com/docs/populate.html)。

为了让这个解释简短,我想展示更新后的模式,然后展示我如何能够在一个级别上进行填充。这篇文章的底部是另一个示例,展示了如何跨多个级别进行填充。

用户架构:

// Setup dependencies:
var mongoose = require('mongoose'),
    Schema = mongoose.Schema;

// Setup a schema:
var UserSchema = new Schema (
    
        username: 
            type: String,
            minlength: [2, 'Username must be at least 2 characters.'],
            maxlength: [20, 'Username must be less than 20 characters.'],
            required: [true, 'Your username cannot be blank.'],
            trim: true,
            unique: true, // username must be unique
            dropDups: true,
        , // end username field
    ,
    
        timestamps: true,
    
);

// Instantiate our model and export it:
module.exports = mongoose.model('User', UserSchema);

后架构:

// Setup dependencies:
var mongoose = require('mongoose'),
    Schema = mongoose.Schema;

// Setup a schema:
var PostSchema = new Schema (
    
        message: 
            type: String,
            minlength: [2, 'Your post must be at least 2 characters.'],
            maxlength: [2000, 'Your post must be less than 2000 characters.'],
            required: [true, 'You cannot submit an empty post.'],
            trim: true,
        , // end message field
        user: 
            type: Schema.Types.ObjectId,
            ref: 'User'
        ,
        comments: [
            type: Schema.Types.ObjectId,
            ref: 'Comment'
        ],
    ,
    
        timestamps: true,
    
);

// updates userID based upon current session login info:
PostSchema.methods.updateUserID = function(id) 
    this.user = id;
    this.save();
    return true;
;

// adds comment to post's comments array:
PostSchema.methods.addComment = function(commentID) 
    this.comments.push(commentID);
    this.save();
    return true;
;

// Instantiate our model and export it:
module.exports = mongoose.model('Post', PostSchema);

评论架构:

// Setup dependencies:
var mongoose = require('mongoose'),
    Schema = mongoose.Schema;

// Setup a schema:
var CommentSchema = new Schema (
    
        message: 
            type: String,
            minlength: [2, 'Your comment must be at least 2 characters.'],
            maxlength: [2000, 'Your comment must be less than 2000 characters.'],
            required: [true, 'You cannot submit an empty comment.'],
            trim: true,
        , // end message field
        user: 
            type: Schema.Types.ObjectId,
            ref: 'User'
        ,
        _post: 
            type: Schema.Types.ObjectId,
            ref: 'Post'
        ,
    ,
    
        timestamps: true,
    
);

// Assigns user ID to comment when called (uses session info):
CommentSchema.methods.updateUserID = function(id) 
    this.user = id;
    this.save();
    return true;
;

// Assigns post ID to comment when called:
CommentSchema.methods.updatePostID = function(id) 
    this._post = id;
    this.save();
    return true;
;

// Instantiate our model and export it:
module.exports = mongoose.model('Comment', CommentSchema);

解决方案:使用填充方法:

使用 populate() 方法 (http://mongoosejs.com/docs/populate.html),我们可以从 Post 模型开始并填充 comments 字段。

使用 PostSchema 中定义的实例方法,我们将评论 ID 推送到 Post.comments 数组中,下面的 populate() 方法会抓取所有评论对象并将 ID 替换为实际的评论对象。

var User = require('mongoose').model('User');
var Post = require('mongoose').model('Post');
var PostComment = require('mongoose').model('Comment');

Post.find()
    .populate('comments')  // populates comments objects based on ids in `comments`
    .exec()
    .then(function(commentsAndPosts) 
        console.log(commentsAndPosts);
        return res.json(commentsAndPosts);
    )
    .catch(function(err) 
        console.log(err);
        return res.json(err);
    )

提供给 Mongoose 文档的链接有一个很好的干净示例。

现在,在前端,每​​个帖子对象内部都有一个 cmets 数组,并且所有评论对象都已填充!甜蜜!

概述:

我能够在每个 Post 对象中存储一组评论 ID(当有新评论时,comment._id 被推送到 Post.comments 数组中)。使用populate(),我们可以查询Comments 集合并获取与相关ID 关联的所有评论对象。这很棒,因为在我们的填充方法完成后,我们可以将所有帖子和 cmets 的整个数组作为一个 JSON 对象发回,并在前端对其进行迭代。

多层次填充:

假设在上述场景中,我还想获取帖子和评论作者的用户名(注意:每个评论和帖子对象都有一个 user 字段,其中存储了一个 User._id

我们可以使用填充,通过嵌套一些参数,来跨越多个级别,如下所示。这将提供与上述示例相同的数据(所有帖子和所有 cmets),但包括基于存储的用户 ID 的 cmets 和帖子的用户名:

Post.find() // finds all posts
    .populate('user') // populates the user (based on ID) and returns user object (entire user object)
    .populate( 
        path: 'comments', // populates all comments based on comment ID's
        populate:   path: 'user'  // populates all 'user" fields for all comments (again, based on user ID)
    )
    .exec()
    .then(function(commentsAndPostsWithUsers) 
        console.log(commentsAndPostsWithUsers);
        return res.json(commentsAndPostsWithUsers);
    )
    .catch(function(err) 
        console.log(err);
    )

在上面的示例中,我们首先抓取所有帖子,然后抓取每个帖子的所有用户对象,然后抓取所有 cmets,以及每个评论的每个用户对象,然后将它们捆绑在一起!

使用 Angular 在前端迭代:

我们可以使用ng-repeat**遍历我们返回的帖子:

<!-- Repeating Posts -->
<div ng-repeat="post in commentsAndPostsWithUsers >
    <h3 ng-bind="post.user.username"></h3>
    <h2 ng-bind="post.createdAt"></h2>
    <p ng-bind="post.message"></p>
    <!-- Repeating Comments -->
    <div ng-repeat="comment in post.comments">
        <h4 ng-bind="comment.user.username"></h4>
        <h5 ng-bind="comment.createdAt"></h5>
        <p ng-bind="comment.message"></p>
    </div>
</div>

** Angular 控制器未在上面的代码示例中显示。

我们可以分别通过post.user.usernamepost.user.username 访问帖子或 cmets 的用户名,因为已附加整个用户对象(因此我们必须向下导航以获取用户名)。然后我们可以使用另一个ng-repeat 遍历post.comments,显示所有的cmets。祝愿一切顺利,并希望这可以帮助某人避免我所做的困惑!

【讨论】:

以上是关于如何处理一对多关系中的嵌套 mongoose 查询和异步问题?的主要内容,如果未能解决你的问题,请参考以下文章

如何处理 Redux 中的关系数据?

如何处理没有其他关系的实体中的嵌套对象

如何处理多层1对多关系的DAL?

(Mongo/Mongoose) 如何处理等待多个查询的结果

如何处理数据加载器/GraphQL 嵌套查询中的并发 DbContext 访问?

如何处理 GraphQL 中的嵌套输入