本篇文章為大家展示了ElasticSearch實用化訂單搜索方案是怎樣的,內容簡明扼要并且容易理解,絕對能使你眼前一亮,通過這篇文章的詳細介紹希望你能有所收獲。
我們提供的服務有:成都網站建設、成都網站設計、微信公眾號開發(fā)、網站優(yōu)化、網站認證、中牟ssl等。為數(shù)千家企事業(yè)單位解決了網站和推廣的問題。提供周到的售前咨詢和貼心的售后服務,是有科學管理、有技術的中牟網站制作公司
站外推廣系統(tǒng)訂單報表一直是一個痛點,研究后選擇ES搜索引擎進行改造。上線來遇到很多問題,經歷了很多的修改,現(xiàn)在系統(tǒng)終于正常運行,滿足訂單報表大數(shù)據(jù)量、實時更新、響應快、多維度查詢的需求。
搜索引擎中,主要考慮到ES支持結構化數(shù)據(jù)查詢以及支持實時頻繁更新特性:
整個業(yè)務線使用服務化方式,ES集群和數(shù)據(jù)庫分庫,作為數(shù)據(jù)源被訂單服務系統(tǒng)封裝為對外統(tǒng)一接口;各前后臺應用和報表中心,使用服務化的方式獲取訂單數(shù)據(jù)。
ES數(shù)據(jù)更新有批量更新和實時更新兩種:
1、手動更新為初始化數(shù)據(jù),或者修復數(shù)據(jù)時使用
2、實時更新通過監(jiān)控數(shù)據(jù)庫訂單表的binlog,進行實時同步
對于頻繁更新一定要考慮到使用SSD
因為是訂單數(shù)據(jù),并且有頻繁數(shù)據(jù)更新,所以我們選擇自己指定的唯一id,具體對比如下:
實時數(shù)據(jù)更新采用監(jiān)聽數(shù)據(jù)庫binlog的方式實現(xiàn):
不一致原因:
1、各域代碼發(fā)布
2、網絡延時
3、集群故障
4、vdp、vms丟數(shù)據(jù)
解決方案:
1、使用調度任務,每天對比三個月內每天的數(shù)據(jù)
2、如果存在數(shù)據(jù)不一致,自動批量同步當天數(shù)據(jù)
3、數(shù)據(jù)不一致,自動發(fā)送告警郵件
4、調度任務可隨時手動終止
5、至今尚未出現(xiàn)不一致的情況
上述內容就是ElasticSearch實用化訂單搜索方案是怎樣的,你們學到知識或技能了嗎?如果還想學到更多技能或者豐富自己的知識儲備,歡迎關注創(chuàng)新互聯(lián)行業(yè)資訊頻道。