這個應(yīng)該是說
創(chuàng)新互聯(lián)建站服務(wù)項目包括永年網(wǎng)站建設(shè)、永年網(wǎng)站制作、永年網(wǎng)頁制作以及永年網(wǎng)絡(luò)營銷策劃等。多年來，我們專注于互聯(lián)網(wǎng)行業(yè)，利用自身積累的技術(shù)優(yōu)勢、行業(yè)經(jīng)驗、深度合作伙伴關(guān)系等，向廣大中小型企業(yè)、政府機構(gòu)等提供互聯(lián)網(wǎng)行業(yè)的解決方案，永年網(wǎng)站推廣取得了明顯的社會效益與經(jīng)濟效益。目前，我們服務(wù)的客戶以成都為中心已經(jīng)輻射到永年省份的部分城市，未來相信會繼續(xù)擴大服務(wù)區(qū)域并繼續(xù)獲得客戶的支持與信任！
通過使用元數(shù)據(jù)，不斷的完善現(xiàn)有的技術(shù)元數(shù)據(jù)與業(yè)務(wù)元數(shù)據(jù)。
通過完善的過程來指導(dǎo)整個數(shù)據(jù)倉庫的建立。
元數(shù)據(jù)驅(qū)動的數(shù)據(jù)倉庫開發(fā)過程可以細分為以下階段：
1) 建立元數(shù)據(jù)
a. 定義元數(shù)據(jù)的數(shù)據(jù)源；
b. 定義元數(shù)據(jù)的內(nèi)容和屬性；
c. 定義元數(shù)據(jù)使用規(guī)則；
d. 聲明元數(shù)據(jù)聯(lián)合使用的規(guī)則；
元數(shù)據(jù)驅(qū)動，螺旋上升的數(shù)據(jù)倉庫開發(fā)方式優(yōu)點包括：
1. 建立中央數(shù)據(jù)倉庫系統(tǒng)數(shù)據(jù)的統(tǒng)一視圖；
2. 統(tǒng)一的元數(shù)據(jù)管理；
3. 靈活的體系結(jié)構(gòu)；
4. 可擴展的架構(gòu)；
與之相對的是“模型驅(qū)動構(gòu)架”（MDA），它是OMG定義的一個軟件開發(fā)框架。MDA的關(guān)鍵之處是，模型在軟件開發(fā)過程中扮演了非常重要的角色。在MDA中，軟件開發(fā)過程是由對軟件系統(tǒng)的建模行為驅(qū)動的。
什么是虛擬數(shù)據(jù)機？數(shù)據(jù)虛擬機(VDM)就是一種可訪問、集合和管理數(shù)據(jù)的嵌入式數(shù)據(jù)管理引擎。
既然你知道了什么是VDM，那Vibe又是什么呢？簡單地說，Vibe就是數(shù)據(jù)虛擬機 (VDM) 的品牌名稱。
問題解決了，為了使閱讀起來更有趣，在此會更詳細地介紹有關(guān)Vibe 虛擬數(shù)據(jù)機發(fā)展歷程的背景情況。
虛擬數(shù)據(jù)機的發(fā)展歷程
自20年前 Informatica公司成立以來，我們就秉持著一種理念，即把數(shù)據(jù)集成的發(fā)展從實際的運行期中剝離開來。這就是當(dāng)我們說Informatica PowerCenter數(shù)據(jù)集成產(chǎn)品是元數(shù)據(jù)驅(qū)動的時候，Informatica所具有的含義。術(shù)語“元數(shù)據(jù)驅(qū)動”的意思就是說開發(fā)人員不必知道是 C、C++還是Java語言來執(zhí)行數(shù)據(jù)集成。開發(fā)人員在圖形化的開發(fā)環(huán)境中使用拖放工具可顯示數(shù)據(jù)是如何從A系統(tǒng)中移走，然后如何與B系統(tǒng)中的數(shù)據(jù)結(jié)合，最后在數(shù)據(jù)到達C系統(tǒng)時最終被清除和變換。在開發(fā)過程的最精細層面，你可能會看到代表數(shù)據(jù)集的圖標(biāo)，以及表示從哪些數(shù)據(jù)集出來并進入到其他數(shù)據(jù)集的關(guān)系，并同時說明了數(shù)據(jù)如何進行相應(yīng)變換的線條。
Informatica Developer的拖放圖形化開發(fā)環(huán)境
當(dāng)然，你是看不到代碼的，整個過程中只有描述數(shù)據(jù)將如何被修改的元數(shù)據(jù)。這就是說，一個了解數(shù)據(jù)集成概念的人，不一定就得是軟件開發(fā)人員，他可以開發(fā)數(shù)據(jù)整合作業(yè)，將原始數(shù)據(jù)轉(zhuǎn)換為高質(zhì)量的信息，這樣，相關(guān)機構(gòu)就能把他們的數(shù)據(jù)潛能用到工作中去。也就意味著有更多的人能夠開發(fā)數(shù)據(jù)整合作業(yè)，因為通過使用圖形化工具，我們已經(jīng)“大眾化了”數(shù)據(jù)集成開發(fā)。
然而，隨著時間的推移，數(shù)據(jù)集成也變得更加復(fù)雜。從數(shù)據(jù)提取、轉(zhuǎn)換和加載(ETL)批量數(shù)據(jù)移動，數(shù)據(jù)集成發(fā)展到了包括數(shù)據(jù)質(zhì)量、實時數(shù)據(jù)、數(shù)據(jù)虛擬化和現(xiàn)在Hadoop分布系統(tǒng)在內(nèi)的程度。此外，在此前提下或者在云計算中，都可以部署數(shù)據(jù)集成進程。由于數(shù)據(jù)集成已變得更加復(fù)雜，它不得不采用一種混合式的方法，即一種在混合及匹配不斷擴展的底層技術(shù)的同時，需要經(jīng)常使用剛才提到的部分或大多數(shù)功能與方式的方法。
一直以來，Informatica沒有停止過將開發(fā)環(huán)境從底層數(shù)據(jù)移動和變換技術(shù)中剝離開來。但為何這種剝離如此重要呢？因為新的數(shù)據(jù)集成方法帶來新的部署模型，如軟件即服務(wù)（SaaS），新技術(shù)如Hadoop，以及新語言，如Pig和Hive，甚至牽涉到未來的語言。所以現(xiàn)有的數(shù)據(jù)集成開發(fā)人員，無需因為要使用新技術(shù)而去了解新技術(shù)如何工作的細節(jié)。此外，底層技術(shù)在數(shù)據(jù)集成和管理市場中變化的速度也在加快。所以，當(dāng)這種速度加快時，通過把開發(fā)與部署分開，終端用戶可以使用相同的界面繼續(xù)設(shè)計和開發(fā)，并且在內(nèi)部，他們可以利用新的數(shù)據(jù)移動和轉(zhuǎn)換引擎，做虛擬化數(shù)據(jù)，以及整批移動數(shù)據(jù)、實時移動數(shù)據(jù)，或集成大數(shù)據(jù)，而無需了解任可有關(guān)底層語言、系統(tǒng)或框架的詳細信息。
本系列博文將清晰地為您介紹VDM的發(fā)展歷程。在我們的下一期博文中，我們會特別介紹有關(guān)Vibe VDM 的基礎(chǔ)理論以及其工作原理方面的內(nèi)容。別換臺哦，同一Vibe時間，同一Vibe頻道。
package basic;
import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.PreparedStatement;
import java.sql.ResultSet;
import java.sql.SQLException;
import java.sql.Statement;
public class JDBC {
public void findAll() {
try {
// 獲得數(shù)據(jù)庫驅(qū)動
//由于長時間不寫，驅(qū)動名和URL都忘記了，不知道對不對，你應(yīng)該知道的，自己改一下的哈
String url = "jdbc:oracle:thin:@localhost:1521:XE";
String userName = "system";
String password = "system";
Class.forName("oracle.jdbc.driver.OracleDriver");
// 創(chuàng)建連接
Connection conn = DriverManager.getConnection(url, userName,
password);
// 新建發(fā)送sql語句的對象
Statement st = conn.createStatement();
// 執(zhí)行sql
String sql = "select * from users";
ResultSet rs = st.executeQuery(sql);
// 處理結(jié)果
while(rs.next()){
//這個地方就是給你的封裝類屬性賦值
System.out.println("UserName："+rs.getString(0));
}
// 關(guān)閉連接
rs.close();
st.close();
conn.close();
} catch (ClassNotFoundException e) {
// TODO Auto-generated catch block
e.printStackTrace();
} catch (SQLException e) {
// TODO Auto-generated catch block
e.printStackTrace();
}
}
public void delete(){
try {
//步驟還是那六個步驟，前邊的兩步是一樣的
String url = "jdbc:oracle:thin:@localhost:1521:XE";
String userName = "system";
String password = "system";
Class.forName("oracle.jdbc.driver.OracleDriver");
Connection conn = DriverManager.getConnection(url,userName,password);
//這里的發(fā)送sql語句的對象是PreparedStatement,成為預(yù)處理sql對象，因為按條件刪除是需要不定值的
String sql = "delete from users where id = ?";
PreparedStatement ps = conn.prepareStatement(sql);
ps.setInt(0, 1);
int row = ps.executeUpdate();
if(row!=0){
System.out.println("刪除成功！");
}
// 關(guān)閉連接
rs.close();
st.close();
conn.close();
} catch (ClassNotFoundException e) {
// TODO Auto-generated catch block
e.printStackTrace();
} catch (SQLException e) {
// TODO Auto-generated catch block
e.printStackTrace();
}
}
}
NoSQL，指的是非關(guān)系型的數(shù)據(jù)庫。隨著互聯(lián)網(wǎng)web2.0網(wǎng)站的興起，傳統(tǒng)的關(guān)系數(shù)據(jù)庫在應(yīng)付web2.0網(wǎng)站，特別是超大規(guī)模和高并發(fā)的
SNS類型的web2.0純動態(tài)網(wǎng)站已經(jīng)顯得力不從心，暴露了很多難以克服的問題，而非關(guān)系型的數(shù)據(jù)庫則由于其本身的特點得到了非常迅速的發(fā)展。
NoSQL(NoSQL
= Not Only SQL
)，意即“不僅僅是SQL”，是一項全新的數(shù)據(jù)庫革命性運動，早期就有人提出，發(fā)展至2009年趨勢越發(fā)高漲。NoSQL的擁護者們提倡運用非關(guān)系型的數(shù)
據(jù)存儲，相對于鋪天蓋地的關(guān)系型數(shù)據(jù)庫運用，這一概念無疑是一種全新的思維的注入。
從這一新興技術(shù)中選擇一款正確的NoSQL數(shù)據(jù)庫是非常具有挑戰(zhàn)性的。比一下網(wǎng)建議在選擇時考慮以下因素：
并發(fā)控制
并
發(fā)控制指的是當(dāng)多個用戶同時更新運行時，用于保護數(shù)據(jù)庫完整性的各種技術(shù)。并發(fā)機制不正確可能導(dǎo)致臟讀、幻讀和不可重復(fù)讀等此類問題。并發(fā)控制的目的是保
證一個用戶的工作不會對另一個用戶的工作產(chǎn)生不合理的影響。在某些情況下，這些措施保證了當(dāng)用戶和其他用戶一起操作時，所得的結(jié)果和她單獨操作時的結(jié)果是
一樣的。在另一些情況下，這表示用戶的工作按預(yù)定的方式受其他用戶的影響。
封鎖
就是事務(wù)T在對某個數(shù)據(jù)對象（例如表、記錄等）操作之前，先向系統(tǒng)發(fā)出請求，對其加鎖。加鎖后事務(wù)T就對該數(shù)據(jù)對象有了一定的控制，在事務(wù)T釋放它的鎖之前，其它的事務(wù)不能更新此數(shù)據(jù)對象。
封鎖是一次只允許一個用戶讀取或修改的一種機制，是實現(xiàn)并發(fā)控制的一個非常重要的技術(shù)。
MVCC
Multi-Version Concurrency Control多版本并發(fā)控制，維持一個數(shù)據(jù)的多個版本使讀寫操作沒有沖突。MVCC優(yōu)化了數(shù)據(jù)庫并發(fā)系統(tǒng)，使系統(tǒng)在有大量并發(fā)用戶時得到最高的性能，并且可以不用關(guān)閉服務(wù)器就直接進行熱備份。
ACID
指
數(shù)據(jù)庫事務(wù)正確執(zhí)行的四個基本要素的縮寫。包含：原子性(Atomicity）、一致性（Consistency）、隔離性（Isolation）、持久
性（Durability）。一個支持事務(wù)（Transaction）的數(shù)據(jù)庫系統(tǒng)，必需要具有這四種特性，否則在事務(wù)過程（Transaction
processing）當(dāng)中無法保證數(shù)據(jù)的正確性，交易過程極可能達不到交易方的要求。
None
一些系統(tǒng)不提供原子性。
鏡像
數(shù)據(jù)庫鏡像是DBMS根據(jù)DBA的要求，自動把整個數(shù)據(jù)庫或其中的關(guān)鍵數(shù)據(jù)復(fù)制到另一個磁盤上，每當(dāng)主數(shù)據(jù)庫更新時，DBMS會自動把更新后的數(shù)據(jù)復(fù)制過去，即DBMS自動保證鏡像數(shù)據(jù)與主數(shù)據(jù)的一致性。
鏡像分為同步和異步。
數(shù)據(jù)存儲
指的是數(shù)據(jù)的物理特性怎樣被存儲在數(shù)據(jù)庫中。
磁盤 數(shù)據(jù)被存儲在硬盤驅(qū)動器里；
GFS或谷歌文件系統(tǒng)是一個由谷歌開發(fā)的專有的分布式文件系統(tǒng)；
Hadoop是Apache軟件框架，免費許可下支持數(shù)據(jù)密集型分布式應(yīng)用程序；
RAM隨機存儲器；
插件 可以添加外部插件；
Amazon S3通過Web服務(wù)接口提供存儲；
BDB：BDB
全稱是 “Berkeley DB”，它是MySQL具有事務(wù)能力的表類型，由Sleepycat
Software開發(fā)。BDB表類型提供了MySQL用戶長久期盼的功能，即事務(wù)控制能力。在任何RDBMS中，事務(wù)控制能力都是一種極其重要和寶貴的功
能。事務(wù)控制能力使得我們能夠確保一組命令確實已經(jīng)全部執(zhí)行成功，或者確保當(dāng)任何一個命令出現(xiàn)錯誤時所有命令的執(zhí)行結(jié)果均被退回。
實現(xiàn)語言
實現(xiàn)語言會影響數(shù)據(jù)庫的發(fā)展速度。典型的NoSQL數(shù)據(jù)庫是用低級語言如C / C + +編寫的。另一方面，那些更高層次的語言如Java，使自定義更容易。
實現(xiàn)語言有：C, C++, Erlang, Java, Python
特性
考慮下列哪一個特點對你的數(shù)據(jù)庫是最重要的：
持久性
可用性
一致性
分區(qū)容忍性
證書類型
下面這些許可證是一個不同的開放源碼許可的形式：
GPL：通用公共許可證
BSD：伯克利軟件分發(fā)
MPL：Mozilla公共許可證
EPL：Eclipse公共許可證
IDPL：最初的開發(fā)者的公共許可證
LGPL：較寬松通用公共許可證
存儲類型
存儲類型是NoSQL數(shù)據(jù)庫最大的不同，是決定使用哪款數(shù)據(jù)庫的一個首要指標(biāo)。
關(guān)鍵字：支持get、put和刪除操作
按列存儲：相對于傳統(tǒng)的按行存儲，數(shù)據(jù)集成容易多了
面向文件系統(tǒng)：存儲像是JSON或XML這樣的結(jié)構(gòu)化文件，很容易就能從面向?qū)ο筌浖蝎@取數(shù)據(jù)。
hi，米娜桑，我是大家的怪力少女趙壯實！
又是一個美好的周六的早上，今天我們來聊聊——元數(shù)據(jù)！
元數(shù)據(jù)也是近兩年才火熱起來的產(chǎn)品崗位和概念，因為偏向于后側(cè)，相比于數(shù)據(jù)分析、數(shù)據(jù)BI、用戶分層、歸因等酷炫的名詞下，元數(shù)據(jù)就像一朵白蓮花。
01?? 什么是元數(shù)據(jù)？
好吧，元數(shù)據(jù)為什么可以睥睨一切呢？因為它是“元”數(shù)據(jù)。
啥是“元數(shù)據(jù)”——metadata？
壯實見到這個詞語，第一次流下了久別重逢的淚水，甚至有點想笑，莫非，元數(shù)據(jù)，是一位熟悉現(xiàn)代主義思潮的大佬起的名字？
好的，壯實先從人文視角解釋一下什么叫做“元”。
元，依舊指的是原始、原初的意思。我們那元敘事、元數(shù)據(jù)、元小說給大家講講什么是“元”。
1.“元”+“敘事”=元敘事
對于敘事的完整解釋，即對歷史的意義、經(jīng)歷和知識的敘述
2.“元”+“數(shù)據(jù)”=元數(shù)據(jù)
有關(guān)于數(shù)據(jù)的數(shù)據(jù)
3.“元”+“小說”=元小說
元小說，作家自覺地暴露小說的虛構(gòu)過程，產(chǎn)生間離效果，進而讓接受者明白，小說就是虛構(gòu)，不能把小說當(dāng)作現(xiàn)實。這樣，虛構(gòu)在小說中也就獲得了本體的意義。
好吧，簡單來說，元就是這個東西原始的框架、元素。在現(xiàn)代主義大工業(yè)的背景下，人類一切進入了“秩序模式”，所以需要“元”。所以就有了萬物“元”化。
是的，大家是不是最近還會聽到一個詞，叫做“元認知”。沒什么神奇的，套用概念，元認識就是關(guān)于認知的認知，也許善友老師“第一性原理”和叫獸“時間的朋友”或許是“元認知”？
那元數(shù)據(jù)，我們就好理解了，就是“關(guān)于數(shù)據(jù)的數(shù)據(jù)”，有了元數(shù)據(jù)，它可以讓我們的數(shù)據(jù)生產(chǎn)、使用更加秩序化。
數(shù)據(jù)生產(chǎn)，有的人會叫做“后臺元數(shù)據(jù)”：指導(dǎo)數(shù)據(jù)清洗裝載工作。
數(shù)據(jù)使用，有的人會分為“前端元數(shù)據(jù)” ：描述性、幫助我們更加流暢的使用報表和查詢工具。
對于元數(shù)據(jù)的分類，我們可以分為以下三類:
業(yè)務(wù)元數(shù)據(jù)? 從業(yè)務(wù)層面描述元數(shù)據(jù)。
技術(shù)元數(shù)據(jù)? 數(shù)據(jù)技術(shù)層面上的各種統(tǒng)計信息，包含數(shù)據(jù)類型、長度、血緣沿襲、數(shù)據(jù)剖析結(jié)果等。
處理過程元數(shù)據(jù)? ETL自身執(zhí)行結(jié)果統(tǒng)計信息，如多少行被加載、多少行數(shù)據(jù)被丟棄以及數(shù)據(jù)加載時間等。
02? ? 元數(shù)據(jù)核心理念和關(guān)鍵要素
話不多說，我們來上阿里云官方ppt：
好的，如果你們看不懂，壯實還畫了一個圖：
原來的數(shù)據(jù)生產(chǎn)-使用流程
涉及的相關(guān)的元數(shù)據(jù)
03? ? 元數(shù)據(jù)產(chǎn)品
目前國內(nèi)的元數(shù)據(jù)管理工具大概有三類。
一是像IBM、CA等公司都提供的專門工具，比如IBM收購Ascential得到的MetaStage，CA的DecisionBase；
二是像DAG的MetaCenter，開源產(chǎn)品Pentaho Metadata，它們不依托于某項BI產(chǎn)品，是一種第三方的元數(shù)據(jù)管理工具；
開源產(chǎn)品Pentaho Metadata示意圖
三是像普元、石竹這樣的集成商也有自己的元數(shù)據(jù)管理工具：普元MetaCube、新炬網(wǎng)絡(luò)元數(shù)據(jù)管理系統(tǒng)、石竹MetaOne等。
普元元數(shù)據(jù)驅(qū)動的微服務(wù)架構(gòu)：
新炬網(wǎng)絡(luò)元數(shù)據(jù)管理系統(tǒng)：
;c=indexa=listscatid=188
石竹MetaOne產(chǎn)品圖：
專門的元數(shù)據(jù)管理工具，對自家產(chǎn)品兼容較好，一旦涉及跨系統(tǒng)管理，就不盡如人意了。
04? ? 元數(shù)據(jù)的功能和價值
如果你問我，元數(shù)據(jù)的功能和價值在哪里？目前，業(yè)界開展了一些實踐：
1、血緣分析：向上、向下表級、字段級別的追溯數(shù)據(jù)。血緣分析可以讓您輕松知道：“我正在查看的報告數(shù)據(jù)來源是什么？”、“數(shù)據(jù)經(jīng)過哪些轉(zhuǎn)換處理？”、“銷售額”從包含稅費更改為不包括稅費，哪些下游字段受到了影響。血緣分析可以滿足許多行業(yè)(包括醫(yī)療、金融、銀行和制造業(yè)等)對所呈現(xiàn)數(shù)據(jù)的特殊監(jiān)管及合規(guī)性要求。
?2、指標(biāo)一致性分析：定期分析指標(biāo)定義是否和實際情況一致。大佬會上對不齊數(shù)據(jù)是何等的尷尬。。。。
?3、實體關(guān)聯(lián)查詢：事實表與維度表的代理鍵自動關(guān)聯(lián)。
05? ? 后記
打破一切：從人文后現(xiàn)代主義到數(shù)據(jù)后現(xiàn)代主義。
20世紀60年代，德國、法國、美國等出現(xiàn)了反西方近現(xiàn)代體系哲學(xué)傾向的思潮，學(xué)術(shù)上稱之為“后現(xiàn)代主義”。你也許不知道啥是后現(xiàn)代主義，來一張圖感受一下：
對！就是達利的《記憶的永恒》。
后現(xiàn)代主義就是一種用無序反對有序，用個人囈語反對宏大敘事、用解構(gòu)反對結(jié)構(gòu)的一種精神。
當(dāng)代美國活躍的后現(xiàn)代主義者之一格里芬就說：“如果說后現(xiàn)代主義這一詞匯在使用時可以從不同方面找到共同之處的話， 那就是，它指的是一種廣泛的情緒，而不是一種共同的教條———即一種認為人類可以而且必須超越現(xiàn)代的情緒?！?/p>
所有理論的背后，都是這個時代的主流認知+情緒。數(shù)據(jù)也不例外。我們來看看《壯實學(xué)數(shù)據(jù)技術(shù)01》中的數(shù)據(jù)倉庫兩位大佬之爭，就知道人們在反復(fù)橫跳在秩序和速度中。
所以，我們今天要考慮，元數(shù)據(jù)在今天的合理性是什么？
在雜亂數(shù)據(jù)被管理起來之后，是不是在復(fù)雜、程式化上需要做做減法？
數(shù)據(jù)多≠信息多。如何把數(shù)據(jù)變?yōu)樾畔?，是每一個數(shù)據(jù)人需要持續(xù)思考的事情。
重慶分公司
重慶分公司
