|
在上篇筆記中，為車輛信息表、車輛耗損表以及車輛營收表插入了一些數(shù)據(jù)。之后便是查詢了，重點(diǎn)也在查詢……按照之前定好的數(shù)據(jù)結(jié)構(gòu)，如果查詢mongodb document的最外層比較簡單，但是我們的重點(diǎn)應(yīng)該是FormItems表單項(xiàng)集合中的表單項(xiàng)，對(duì)他們進(jìn)行查詢、統(tǒng)計(jì)等。針對(duì)插入的數(shù)據(jù)，我寫了一個(gè)查詢：查詢車輛信息表中主鍵ID為1的車輛的所有耗損記錄。分析一下，因?yàn)樗械谋恚ㄉ厦娴娜龔埍矶挤旁贔ormInstace表中）都在一個(gè)真實(shí)的表中，所以我們首先要確定FormId，之后是怎么確定是哪輛車，車輛耗損表中有一個(gè)字段冗余著車輛信息（不清楚的可以翻一下前面的筆記），那么查詢語句就出來了： db.getCollection('FormInstace').find({FormId:'507048044944692000','FormItems':{$elemMatch:{'key':'1572493552001','value.id':"1"}}})
這個(gè)查詢挺簡單的，確定了表之后就是一個(gè)等值查詢，但是現(xiàn)在卻因?yàn)槲覀兊臄?shù)據(jù)存儲(chǔ)結(jié)構(gòu)用到了mongodb中的$elemMatch。這還是最簡單的查詢，之后要是有復(fù)雜的查詢統(tǒng)計(jì)更是不敢想象（事實(shí)上也確實(shí)如此：現(xiàn)在的項(xiàng)目中對(duì)表單中的字段進(jìn)行查詢統(tǒng)計(jì)非常困難）……那么我們能不能將FormItems表單項(xiàng)集合中的字段拿到document的最外層，和之前的關(guān)系型數(shù)據(jù)一樣，如下圖：
答案是可以，mongodb有很多聚合管道，使用不同的組合可以幫我們實(shí)現(xiàn)上述效果，由于mongodb的版本不同以及語句的復(fù)雜程度，寫了好幾版本，下面一一列出。 第一版 // 第一版：受限于下面的幾個(gè)聚合管道，可以在3.4.4及以上使用 // $addFields New in version 3.4. // $arrayToObject New in version 3.4.4. // $replaceRoot New in version 3.4. db.getCollection('FormInstace').aggregate([ { $match: { "FormItems.key": { $ne: null } } }, { $addFields: { FormValueObj: { $arrayToObject: { $map: { input: "$FormItems", as: "field", in: [ "$$field.key", "$$field.value" ] } } } } }, { $addFields: { "FormValueObj._id": "$_id", "FormValueObj.ExtendData":"$ExtendData", "FormValueObj.CreateUserId": "$CreateUserId", "FormValueObj.CreateUserName": "$CreateUserName", "FormValueObj.CreateDate":"$CreateDate", "FormValueObj.LastModifyDate":"$LastModifyDate", "FormValueObj.FormId": "$FormId", "FormValueObj.FormVersion":"$FormVersion" } }, { $replaceRoot: { newRoot: "$FormValueObj" } } ]); 看一下執(zhí)行結(jié)果（用的是Robo 3T 1.2.1）
看到這樣的執(zhí)行結(jié)果還是很滿意的，這不正是我們想要的嘛！但是當(dāng)我調(diào)整上圖中的數(shù)值時(shí)（修改為500），卻報(bào)錯(cuò)了(⊙o⊙)…
我去這是什么情況，我都懷疑我的語句寫的有問題了，可是為什么第一次沒問題-_-||，我在另一臺(tái)電腦中測(cè)試時(shí)（操作方式相同，只是版本不同，版本是1.3），還出現(xiàn)過“Cannot convert to an aggregation if ntoreturn is set”這樣的錯(cuò)誤，網(wǎng)上查到了這篇文章https://github.com/Studio3T/robomongo/issues/1529 （這里只是記錄一下，有時(shí)間再看吧）。我還有另一個(gè)GUI，便試了一下：
至此我覺得語句應(yīng)該沒問題。最后的數(shù)據(jù)列是合并了所有表（邏輯上）中的所有字段和公共字段。 第二版 // 第二版：受限于下面的幾個(gè)聚合管道，可以在3.4.4及以上使用 // $addFields New in version 3.4. // $arrayToObject New in version 3.4.4. // $objectToArray New in version 3.4.4. // $concatArrays New in version 3.2. // $replaceRoot New in version 3.4. db.getCollection('FormInstace').aggregate([ { $match: { "FormItems.key": { $ne: null } } }, { $addFields: { TempFormValueObj: { $arrayToObject: { $map: { input: "$FormItems", as: "field", in: [ "$$field.key", "$$field.value" ] } } } } }, { $addFields: { TempFormValues: { $objectToArray : "$TempFormValueObj" } } }, { $addFields:{ FormValueObj:{ $arrayToObject:{ $map:{ input:{ $concatArrays: [ "$TempFormValues", {$objectToArray : "$$ROOT"} ] }, as: "kv", in: ["$$kv.k","$$kv.v"] } } } } }, { $replaceRoot: { newRoot: "$FormValueObj" } }, { $project: { FormItems:0, TempFormValueObj:0, TempFormValues:0 } } ]); 在上一版中手動(dòng)拼接了所有的公共字段，不是特別方便，這一版本中去掉了
第三版 // 第三版：受限于下面的幾個(gè)聚合管道，可以在3.6及以上使用 // $addFields New in version 3.4. // $arrayToObject New in version 3.4.4. // $replaceRoot New in version 3.4. // $mergeObjects New in version 3.6. db.getCollection('FormInstace').aggregate([ { $match: { "FormItems.key": { $ne: null } } }, { $addFields: { FormValueObj: { $arrayToObject: { $map: { input: "$FormItems", as: "field", in: [ "$$field.key", "$$field.value" ] } } } } }, { $replaceRoot: { newRoot: { $mergeObjects: [ "$FormValueObj", "$$ROOT" ] } } }, { $project: { FormItems:0, FormValueObj:0 } } ]); 這一版代碼最精簡，但是依賴的mongodb的版本比較高，要3.6+
現(xiàn)在我們整理完了數(shù)據(jù)，再看一下上面的查詢，對(duì)比一下變化
就是在最后添加一個(gè)篩選管道，結(jié)果和最上面的結(jié)果是一樣的都是58條。這里你可能會(huì)發(fā)現(xiàn)幾個(gè)問題： 1、查詢表單中的表單項(xiàng)都是硬編碼的數(shù)字（例如“1572493552001”），可讀性太差了； 2、查詢時(shí)間有點(diǎn)長（圖片中有執(zhí)行時(shí)間）； 3、寫一個(gè)簡單的查詢，這代碼也太多了 …… 對(duì)上面的問題，解釋一下 1、在實(shí)際的界面中的篩選字段都是拖拉拽設(shè)計(jì)的，用戶是感知不到的，“1572493552001”只是一個(gè)橋梁 2、查詢?nèi)康臅r(shí)間是有點(diǎn)長，好吧！不是有點(diǎn)是很長……如果業(yè)務(wù)需求需要獲取所有的數(shù)據(jù)時(shí)，就不要用這種方式了，麻煩你換一種方式吧！我想說的是實(shí)際的場(chǎng)景中都是分頁加載，這時(shí)時(shí)間還是可以接受的，下面是獲取30條的截圖，時(shí)間0.114s
3、代碼有點(diǎn)多的問題，其實(shí)你可以將上面整理數(shù)據(jù)的代碼作為篩選的前置條件，只要是查詢都添加這段代碼；還有一種處理方式就是先創(chuàng)建一個(gè)視圖(mongodb 3.4+支持視圖，https://docs./manual/core/views/) db.createView("FormInstaceView","FormInstace",[
{
$match: {
"FormItems.key": { $ne: null }
}
},
{
$addFields: {
FormValueObj: {
$arrayToObject: {
$map: {
input: "$FormItems",
as: "field",
in: [ "$$field.key", "$$field.value" ]
}
}
}
}
},
{
$replaceRoot: { newRoot: { $mergeObjects: [ "$FormValueObj", "$$ROOT" ] } }
},
{
$project: {
FormItems:0,
FormValueObj:0
}
}
]);
之后你就可以向下面一樣查詢了
結(jié)果和上面的沒有什么區(qū)別，但是你不要將視圖當(dāng)作mongodb中的collection使用，這樣是查不到數(shù)據(jù)的 db.getCollection('FormInstaceView').find({FormId:"507048044944692000","1572493552001.id":1})
這篇筆記還是夠長的，一大推代碼……就到這里了。 |
|
|
