使用关联的集合字段进行查找和排序的MongoDB聚合正在减慢查询速度

Question

我的mongodb数据库中有两个集合，如下所示：

employee_details 约330000份文件，department_id作为部门馆藏的参考

具有 2 个字段_id和dept_name的部门集合

我已经将索引添加到集合中作为 folows

db.departments.createIndex( { dept_name: 1 } )
db.employee_details.createIndex( { department_id: 1 } )
db.employee_details.createIndex( { employee_fname: 1 } )

我想通过连接两个集合来获取要在数据表上列出的数据。但是当我试图这样做时，我遇到了两个问题。

首先，当我添加一次又一次的排序时，quer 运行需要很长时间，我添加了一次又一次的查找，因为我需要与dept_name收集部门一起排序。查询如下

db.getCollection("employee_details").aggregate([
{
$lookup: {
from: "departments",
localField: "department_id",
foreignField: "_id",
as: "Department"
}
},
{ $unwind: { path: "$Department", preserveNullAndEmptyArrays: true } },
{ $sort: { "Department.dept_name": 1 } },
{ $limit: 30 }
]);

其次，当我在查找上方添加排序时，查询变得很快，但如果我使用 dept_name 或 department_id 进行排序，结果会给出错误的排序(排序适用于employee_details集合的字段(。查询如下

db.getCollection("employee_details").aggregate([
{ $unwind: { path: "$Department", preserveNullAndEmptyArrays: true } },
{ $sort: { "Department.dept_name": 1 } },
//{ $sort: { "department_id": 1 } }, // tried this also
{ $limit: 30 },
{
$lookup: {
from: "departments",
localField: "department_id",
foreignField: "_id",
as: "Department"
}
}
]);

有人可以提供优化的解决方案来获取数据以及从所有相关集合中进行排序。 提前谢谢你。

Answer 1

试试这个：

db.departments.aggregate([
{
$sort: {
"dept_name": 1
}
},
{
$lookup: {
from: "employee_details",
localField: "_id",
foreignField: "department_id",
as: "Employee"
}
},
{
$unwind: "$Employee"
},
{
$addFields: {
tmp: {
$mergeObjects: [
{
Department: "$$ROOT"
},
"$Employee"
]
}
}
},
{
$project: {
"tmp.Department.Employee": 0
}
},
{
$addFields: {
"tmp.Department": [
"$tmp.Department"
]
}
},
{
$replaceRoot: {
newRoot: "$tmp"
}
},
{
$limit: 30
}
])

蒙戈游乐场

Answer 2

您可以使用以下聚合：

db.getCollection("departments").aggregate([
{
$sort: {
"dept_name": 1
}
},
{
$lookup: {
from: "employee_details",
localField: "_id",
foreignField: "department_id",
as: "employees"
}
},
{
$unwind: "$employees"
},
{
$limit: 30
},
{ $addFields: { "employees.department_name": "$dept_name" } },
{ $replaceRoot: { newRoot: "$employees" } }
])

这将适用于MongoDB版本3.4，即使没有任何索引，它也足够快。