數(shù)據(jù)中心整體解決方案
隨著全球經(jīng)濟(jì)的發(fā)展、互聯(lián)網(wǎng)時(shí)代向DT時(shí)代的快速轉(zhuǎn)變，企業(yè)發(fā)展到一定階段，一體化、產(chǎn)業(yè)化、互聯(lián)化勢(shì)必成為二次騰飛的新的機(jī)遇。但是在企業(yè)內(nèi)部，長(zhǎng)久以來(lái)的業(yè)務(wù)分散發(fā)展、導(dǎo)致信息孤島、業(yè)務(wù)鏈斷點(diǎn)等等問(wèn)題，這些問(wèn)題本質(zhì)上是數(shù)據(jù)的問(wèn)題，數(shù)據(jù)沒有實(shí)現(xiàn)深層次的價(jià)值。企業(yè)實(shí)現(xiàn)快速發(fā)展，解決數(shù)據(jù)的問(wèn)題，挖掘數(shù)據(jù)的價(jià)值是勢(shì)在必行的一條道路。其中，數(shù)據(jù)價(jià)值發(fā)現(xiàn)的三個(gè)主要思路是：
解決企業(yè)信息孤島，實(shí)現(xiàn)業(yè)務(wù)一體化貫通；該思路是目前企業(yè)解決信息孤島的主要解決方案。
數(shù)據(jù)一體化，為企業(yè)發(fā)展提供深層次價(jià)值挖掘；該思路的本質(zhì)是以數(shù)據(jù)為現(xiàn)象發(fā)現(xiàn)企業(yè)內(nèi)在本質(zhì)，解決企業(yè)問(wèn)題。
數(shù)據(jù)運(yùn)營(yíng)化，自身數(shù)據(jù)的對(duì)外服務(wù)和運(yùn)營(yíng)，掌控入口；該思路目前在互聯(lián)網(wǎng)行業(yè)和掌握了數(shù)據(jù)的行業(yè)開展的比較多，通過(guò)挖掘數(shù)據(jù)的價(jià)值，實(shí)現(xiàn)數(shù)據(jù)增值。
結(jié)合當(dāng)前數(shù)據(jù)增值的幾種思路，以及目前大型集團(tuán)企業(yè)遇到的問(wèn)題，北京京航計(jì)算通訊研究所經(jīng)過(guò)幾年的研究實(shí)踐，成功發(fā)布了企業(yè)數(shù)據(jù)資源管理與分析平臺(tái)V2.0，目標(biāo)是為企業(yè)解決數(shù)據(jù)問(wèn)題，實(shí)現(xiàn)數(shù)據(jù)增值。
飛航數(shù)據(jù)中心整體解決方案1.0版本從2011年開始項(xiàng)目落地，從用戶的基礎(chǔ)數(shù)據(jù)管理需求開始，經(jīng)過(guò)幾年的發(fā)展和實(shí)踐，創(chuàng)新性的提出了業(yè)務(wù)主題數(shù)據(jù)、數(shù)據(jù)全周期采集、管理、應(yīng)用、分析一體化管理的理念。在航天科工集團(tuán)及下屬各級(jí)單位得到了成功的應(yīng)用。
在2015年，經(jīng)過(guò)近5年的經(jīng)驗(yàn)積累，成功發(fā)布飛航企業(yè)數(shù)據(jù)資源管理與分析平臺(tái)，實(shí)現(xiàn)了企業(yè)級(jí)數(shù)據(jù)中心的一鍵式解決方案，同時(shí)，向不同行業(yè)提供最佳業(yè)務(wù)實(shí)踐。
圖一：元數(shù)據(jù)為核心的理念
京航所結(jié)合多年的信息化建設(shè)經(jīng)驗(yàn)，提出了一套符合集團(tuán)型企業(yè)的飛航數(shù)據(jù)資源建模方法可以適應(yīng)不同項(xiàng)目對(duì)元數(shù)據(jù)模型描述方法的差異化定義，以及系統(tǒng)的不同應(yīng)用階段對(duì)元數(shù)據(jù)模型描述方法的調(diào)整。同時(shí)該建模方法為用戶提供了自定義的擴(kuò)展接口。
數(shù)據(jù)建模是數(shù)據(jù)對(duì)象的描述，包括數(shù)據(jù)標(biāo)識(shí)、數(shù)據(jù)構(gòu)成的元素，元數(shù)據(jù)模型是一種數(shù)據(jù)規(guī)范，涵蓋了數(shù)據(jù)的命名、解釋、數(shù)據(jù)結(jié)構(gòu)等信息，可用于創(chuàng)建數(shù)據(jù)庫(kù)結(jié)構(gòu)、了解數(shù)據(jù)模型，執(zhí)行跨系同數(shù)據(jù)交換與共享。在資源目錄下創(chuàng)建元數(shù)據(jù)模型，進(jìn)行主數(shù)據(jù)模型管理。引用元數(shù)據(jù)模型定義，對(duì)主數(shù)據(jù)元素進(jìn)行數(shù)據(jù)描述，形成完整的數(shù)據(jù)信息、數(shù)據(jù)模型信息、數(shù)據(jù)引用關(guān)系信息等，支持?jǐn)?shù)據(jù)的管理應(yīng)用。同時(shí)，對(duì)元數(shù)據(jù)模型進(jìn)行版本管理，以適應(yīng)數(shù)據(jù)管理變動(dòng)的需求，同時(shí)對(duì)數(shù)據(jù)實(shí)體模型、數(shù)據(jù)內(nèi)容產(chǎn)生影響。
基于數(shù)據(jù)資源建模方法，通過(guò)平臺(tái)實(shí)現(xiàn)數(shù)據(jù)資源對(duì)象的數(shù)據(jù)建模，通過(guò)數(shù)據(jù)模型建立數(shù)據(jù)資源的存儲(chǔ)結(jié)構(gòu)、數(shù)據(jù)格式、與其他模型的關(guān)系等。適應(yīng)隨時(shí)間、管理方法的變化而需要進(jìn)行的數(shù)據(jù)模型調(diào)整，通過(guò)系統(tǒng)配置可實(shí)現(xiàn)模型的變更、升級(jí)，并保證數(shù)據(jù)資源的安全性、數(shù)據(jù)模型的平穩(wěn)變化。
以數(shù)據(jù)模型為基礎(chǔ)實(shí)現(xiàn)數(shù)據(jù)的維護(hù)、管理、查詢檢索，支持?jǐn)?shù)據(jù)的流程審核，實(shí)現(xiàn)多角色的數(shù)據(jù)協(xié)同管理。通過(guò)配置實(shí)現(xiàn)數(shù)據(jù)資源管理界面、數(shù)據(jù)項(xiàng)的定制，不同的界面數(shù)據(jù)內(nèi)容應(yīng)用于不同的管理場(chǎng)景。
同時(shí)，京航所結(jié)合多年經(jīng)驗(yàn)，提出了一套以企業(yè)經(jīng)營(yíng)管理為核心的數(shù)據(jù)模型集，提供了標(biāo)準(zhǔn)的數(shù)據(jù)模型。同時(shí)，平臺(tái)提供靈活的模型關(guān)系定義，實(shí)現(xiàn)企業(yè)數(shù)據(jù)的統(tǒng)一視圖。
對(duì)于企業(yè)，特別是集團(tuán)型企業(yè)，需要進(jìn)行編碼管理的基礎(chǔ)數(shù)據(jù)不勝枚舉，人員需要唯一編碼、合同需要編碼、物資需要編碼、產(chǎn)品需要編碼等等，編碼數(shù)據(jù)是企業(yè)業(yè)務(wù)貫通的關(guān)鍵節(jié)點(diǎn)，好比人體的關(guān)節(jié)，是串聯(lián)所有業(yè)務(wù)的關(guān)鍵生命線。
飛航數(shù)據(jù)資源管理與分析平臺(tái)結(jié)合企業(yè)編碼數(shù)據(jù)需求，同時(shí)結(jié)合了由于業(yè)務(wù)發(fā)展導(dǎo)致編碼變更、新舊編碼同時(shí)存在、多編碼規(guī)則等問(wèn)題，提供了一套靈活多變、可配置的編碼引擎。該引擎支持支持多種形式的碼段規(guī)則管理，如固定碼段、特征碼段、日期碼段、流水碼段等。其中，特征碼段管理特征屬性的特征值與特征碼對(duì)照表。通過(guò)該編碼引擎，滿足企業(yè)的編碼數(shù)據(jù)要求。
為了保證數(shù)據(jù)中心的有效性和準(zhǔn)確性，平臺(tái)提供了基于規(guī)則引擎的數(shù)據(jù)質(zhì)量管理模塊，即通過(guò)質(zhì)量規(guī)則的定義以及將規(guī)則與數(shù)據(jù)模型進(jìn)行關(guān)聯(lián)，通過(guò)評(píng)估調(diào)度產(chǎn)生評(píng)估報(bào)告和分析結(jié)果。
質(zhì)量規(guī)則定義中創(chuàng)建針對(duì)數(shù)據(jù)評(píng)估需要的質(zhì)量規(guī)則，在數(shù)據(jù)模型規(guī)則設(shè)置中將系統(tǒng)中每類數(shù)據(jù)模型中需要校驗(yàn)的元素與校驗(yàn)規(guī)則配置起來(lái)。在質(zhì)量評(píng)估調(diào)度中設(shè)置生成評(píng)估結(jié)果的頻率和校驗(yàn)內(nèi)容。數(shù)據(jù)質(zhì)量評(píng)估提供對(duì)數(shù)據(jù)模型的元素手動(dòng)生成評(píng)估報(bào)告。
采用自研的MPP數(shù)據(jù)集市方案，該方案采用類似MapReduce計(jì)算框架，借鑒增量流計(jì)算理念，采用內(nèi)存計(jì)算，庫(kù)內(nèi)計(jì)算，分布式通訊，列存儲(chǔ)分布式文件系統(tǒng)等新技術(shù)開發(fā)實(shí)現(xiàn)的一個(gè)具備分布式并行實(shí)時(shí)處理，復(fù)雜查詢優(yōu)化，復(fù)雜分析支持的大數(shù)據(jù)計(jì)算處理數(shù)據(jù)庫(kù)系統(tǒng)。
數(shù)據(jù)倉(cāng)庫(kù)＋OLAP時(shí)代的商業(yè)智能系統(tǒng)，要求用戶預(yù)先提出的分析及統(tǒng)計(jì)的需求。以此為基礎(chǔ)，展開數(shù)據(jù)建模工作，進(jìn)而導(dǎo)入數(shù)據(jù)，然后再創(chuàng)建Cube。這些工作完成以后，才能開發(fā)商業(yè)智能應(yīng)用，這是典型的數(shù)據(jù)驅(qū)動(dòng)模式。業(yè)務(wù)驅(qū)動(dòng)的商業(yè)智能系統(tǒng)，則直接導(dǎo)入細(xì)節(jié)數(shù)據(jù)，不再要求用戶預(yù)先提出具體的分析及統(tǒng)計(jì)需求，也不再有創(chuàng)建Cube的過(guò)程，這大大簡(jiǎn)化了數(shù)據(jù)層的工作，縮短了數(shù)據(jù)層的響應(yīng)周期，整個(gè)商業(yè)智能系統(tǒng)由數(shù)據(jù)驅(qū)動(dòng)轉(zhuǎn)化為業(yè)務(wù)驅(qū)動(dòng)。
在數(shù)據(jù)倉(cāng)庫(kù)＋OLAP時(shí)代，一個(gè)新的分析需求也許要用一個(gè)月的時(shí)間去實(shí)現(xiàn)，現(xiàn)在只需一周甚至一天。以前建設(shè)一個(gè)商業(yè)智能系統(tǒng)也許需要一年，而如今不到一周我們就能開發(fā)出第一個(gè)數(shù)據(jù)分析應(yīng)用。
探索型BI系統(tǒng)認(rèn)為Reporting、Dashboard等數(shù)據(jù)應(yīng)用是商業(yè)智能系統(tǒng)的門戶、入口而不是終點(diǎn)。在這樣的系統(tǒng)中，基于過(guò)濾(Filter)、鉆取(Drill)、刷取(Brush)、關(guān)聯(lián)(Associate)、變換(Transform)、動(dòng)態(tài)計(jì)算（Dynamic Calculation）等等分析技術(shù)，用戶可以進(jìn)一步與數(shù)據(jù)互動(dòng)(Interactive)。
數(shù)據(jù)層薄了，業(yè)務(wù)層就有條件厚實(shí)起來(lái)。行業(yè)領(lǐng)先的企業(yè)在良好的分級(jí)規(guī)劃和分級(jí)管理下，上至總經(jīng)理下至一線員工，各級(jí)部門都能提出并開發(fā)自己的數(shù)據(jù)分析應(yīng)用，最終打造出隨需應(yīng)變的自服務(wù)商業(yè)智能系統(tǒng)。由于大部分?jǐn)?shù)據(jù)分析應(yīng)用由用戶或者靠近用戶的人員自行開發(fā)，開發(fā)應(yīng)用的關(guān)聯(lián)人員減少，整個(gè)機(jī)構(gòu)管理更加扁平化，而響應(yīng)時(shí)間卻大大縮短，企業(yè)的經(jīng)營(yíng)管理能力和戰(zhàn)略決策水平隨之提升。相比傳統(tǒng)的商業(yè)智能系統(tǒng)，自服務(wù)商業(yè)智能系統(tǒng)更優(yōu)化，更有效率。
直接導(dǎo)入細(xì)節(jié)數(shù)據(jù)的這一數(shù)據(jù)建模技術(shù)，將數(shù)據(jù)和應(yīng)用之間的關(guān)系從緊耦合改造成松耦合，讓大多數(shù)分析應(yīng)用不引起數(shù)據(jù)層的任何改變；而基于MPP架構(gòu)的商業(yè)智能系統(tǒng)，能夠直接對(duì)細(xì)節(jié)數(shù)據(jù)進(jìn)行高性能分析。這樣一來(lái)，用戶可以快速開發(fā)出數(shù)據(jù)應(yīng)用，并隨即進(jìn)行實(shí)時(shí)分析。
DT時(shí)代的到來(lái)，數(shù)據(jù)的價(jià)值會(huì)越來(lái)越被人發(fā)現(xiàn)，特別是對(duì)于大型集團(tuán)企業(yè)，數(shù)據(jù)從產(chǎn)生、傳輸、使用、復(fù)制、報(bào)表、圖形等全生命周期過(guò)程中，每個(gè)階段都會(huì)發(fā)揮不同的作用，只有更深的發(fā)現(xiàn)數(shù)據(jù)的角色，賦予數(shù)據(jù)更多的作用，數(shù)據(jù)就會(huì)為企業(yè)產(chǎn)生更多的作用。
飛航數(shù)據(jù)中心正是為此而生的！
另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)cdcxhl.cn，海內(nèi)外云服務(wù)器15元起步，三天無(wú)理由+7*72小時(shí)售后在線，公司持有idc許可證，提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國(guó)服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案，具有“安全穩(wěn)定、簡(jiǎn)單易用、服務(wù)可用性高、性價(jià)比高”等特點(diǎn)與優(yōu)勢(shì)，專為企業(yè)上云打造定制，能夠滿足用戶豐富、多元化的應(yīng)用場(chǎng)景需求。
重慶分公司
重慶分公司
