真实的国产乱ⅩXXX66竹夫人,五月香六月婷婷激情综合,亚洲日本VA一区二区三区,亚洲精品一区二区三区麻豆

成都創(chuàng)新互聯(lián)網(wǎng)站制作重慶分公司

如何解決正則表示式匹配引起的mongo數(shù)據(jù)庫cpu占用率高問題

這篇文章主要介紹了如何解決正則表示式匹配引起的mongo數(shù)據(jù)庫cpu占用率高問題,具有一定借鑒價(jià)值,感興趣的朋友可以參考下,希望大家閱讀完這篇文章之后大有收獲,下面讓小編帶著大家一起了解一下。

創(chuàng)新互聯(lián)專注于濮陽企業(yè)網(wǎng)站建設(shè),響應(yīng)式網(wǎng)站建設(shè),商城網(wǎng)站建設(shè)。濮陽網(wǎng)站建設(shè)公司,為濮陽等地區(qū)提供建站服務(wù)。全流程定制網(wǎng)站開發(fā),專業(yè)設(shè)計(jì),全程項(xiàng)目跟蹤,創(chuàng)新互聯(lián)專業(yè)和態(tài)度為您提供的服務(wù)

某一天,監(jiān)控到mongo數(shù)據(jù)庫cpu使用率高了很多,查了一下,發(fā)現(xiàn)是下面這種語句引起的:

db.example_collection.find({
 "idField" : 
{ "$regex" : "123456789012345678"
} ,
 "dateField" : 
{ "$regex" : "2019/10/10"
}})

通常,遇到這種情況,我第一反應(yīng)是缺少相關(guān)字段的索引,導(dǎo)致每執(zhí)行一次這種語句都會(huì)全表掃描一次。

但是我用explain( )語句分析了下,發(fā)現(xiàn)上面所涉及的兩個(gè)字段idField、dateField是有索引的,并且該語句也是有使用到索引的。如下為explain( )的結(jié)果:

mgset-11111111:PRIMARY> db.example_collection.find({ "idField" : { "$regex" : "123456789012345678"} , "dateField" : { "$regex" : "2019/10/10"}}).explain("queryPlanner")
{
    "queryPlanner" : {
        "plannerVersion" : 1,
        "namespace" : "example_db.example_collection",
        "indexFilterSet" : false,
        "parsedQuery" : {
            "$and" : [
                {
                    "idField" : {
                        "$regex" : "123456789012345678"
                    }
                },
                {
                    "dateField" : {
                        "$regex" : "2019/10/10"
                    }
                }
            ]
        },
        "winningPlan" : {
            "stage" : "FETCH",
            "inputStage" : {
                "stage" : "IXSCAN",
                "filter" : {
                    "$and" : [
                        {
                            "idField" : {
                                "$regex" : "123456789012345678"
                            }
                        },
                        {
                            "dateField" : {
                                "$regex" : "2019/10/10"
                            }
                        }
                    ]
                },
                "keyPattern" : {
                    "idField" : 1,
                    "dateField" : 1
                },
                "indexName" : "idField_1_dateField_1",
                "isMultiKey" : false,
                "multiKeyPaths" : {
                    "idField" : [ ],
                    "dateField" : [ ]
                },
                "isUnique" : false,
                "isSparse" : false,
                "isPartial" : false,
                "indexVersion" : 2,
                "direction" : "forward",
                "indexBounds" : {
                    "idField" : [
                        "[\"\", {})",
                        "[/123456789012345678/, /123456789012345678/]"
                    ],
                    "dateField" : [
                        "[\"\", {})",
                        "[/2019/10/10/, /2019/10/10/]"
                    ]
                }
            }
        },
        "rejectedPlans" : [ ]
    },
    "ok" : 1
}


查看mongo的日志發(fā)現(xiàn),這種語句執(zhí)行一次就要800~900ms,的確是比較慢。除非數(shù)據(jù)庫cpu核數(shù)很多,要不然只要這種語句每秒并發(fā)稍微高一點(diǎn),cpu很快就被占滿了。

之后搜索了下,發(fā)現(xiàn)有可能是正則表達(dá)式的問題。原來,雖然該語句的確是使用了索引,但是explain( )語句的輸出中還有一個(gè)字段"indexBounds",表示執(zhí)行該語句時(shí)所需掃描的索引范圍。說實(shí)話,上面那個(gè)輸出中,我始終沒看明白它那個(gè)索引范圍。上面的語句對(duì)idField、dateField這兩個(gè)字段都進(jìn)行了普通的正則表達(dá)式匹配,我猜測(cè)它應(yīng)該是掃描了整個(gè)索引樹,所以導(dǎo)致索引并未實(shí)際提升該語句的查詢效率。

我看了下數(shù)據(jù)庫里面的數(shù)據(jù),發(fā)現(xiàn)idField、dateField這兩個(gè)字段完全沒有必要進(jìn)行正則匹配,進(jìn)行普通的文本匹配就行。將正則匹配操作$regex去掉之后,再分析一下,結(jié)果是這樣的:

mgset-11111111:PRIMARY> db.example_collection.find({ "idField" : "123456789012345678", "dateField" : "2019/10/10"}).explain("queryPlanner")
{
    "queryPlanner" : {
        "plannerVersion" : 1,
        "namespace" : "example_db.example_collection",
        "indexFilterSet" : false,
        "parsedQuery" : {
            "$and" : [
                {
                    "idField" : {
                        "$eq" : "123456789012345678"
                    }
                },
                {
                    "dateField" : {
                        "$eq" : "2019/10/10"
                    }
                }
            ]
        },
        "winningPlan" : {
            "stage" : "FETCH",
            "inputStage" : {
                "stage" : "IXSCAN",
                "keyPattern" : {
                    "idField" : 1,
                    "dateField" : 1
                },
                "indexName" : "idField_1_dateField_1",
                "isMultiKey" : false,
                "multiKeyPaths" : {
                    "idField" : [ ],
                    "dateField" : [ ]
                },
                "isUnique" : false,
                "isSparse" : false,
                "isPartial" : false,
                "indexVersion" : 2,
                "direction" : "forward",
                "indexBounds" : {
                    "idField" : [
                        "[\"123456789012345678\", \"123456789012345678\"]"
                    ],
                    "dateField" : [
                        "[\"2019/10/10\", \"2019/10/10\"]"
                    ]
                }
            }
        },
        "rejectedPlans" : [ ]
    },
    "ok" : 1
}

可以看到,仍然使用到了索引,并且索引掃描范圍是僅限于一個(gè)值的。

后來跟開發(fā)人員確認(rèn)了下,該語句確實(shí)沒必要使用正則匹配,就讓他把正則匹配去掉了。之后就沒有再出現(xiàn)問題了,mongo慢日志中也未再出現(xiàn)該語句。

感謝你能夠認(rèn)真閱讀完這篇文章,希望小編分享的“如何解決正則表示式匹配引起的mongo數(shù)據(jù)庫cpu占用率高問題”這篇文章對(duì)大家有幫助,同時(shí)也希望大家多多支持創(chuàng)新互聯(lián),關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道,更多相關(guān)知識(shí)等著你來學(xué)習(xí)!


網(wǎng)頁題目:如何解決正則表示式匹配引起的mongo數(shù)據(jù)庫cpu占用率高問題
本文來源:http://weahome.cn/article/joesgi.html

其他資訊

在線咨詢

微信咨詢

電話咨詢

028-86922220(工作日)

18980820575(7×24)

提交需求

返回頂部