sqlserver大數(shù)據(jù)量update問(wèn)題？

我拿到sql一看是update語(yǔ)句，想都沒(méi)多想直接加并行，但是加了并行發(fā)現(xiàn)子查詢(xún)根本沒(méi)有用到并行，而且整體cost沒(méi)有什么變化。我仔細(xì)想了想，這種寫(xiě)法oracle內(nèi)部是通過(guò)單條跟新的方式進(jìn)行，從p_t中那出一條記錄去c_t中匹配，c_t中采用索引掃描，然后再通過(guò)rowid訪問(wèn)表取到name。所以?xún)?yōu)化器計(jì)算后，不會(huì)對(duì)子查詢(xún)中的c_t應(yīng)用并行，因?yàn)榇藭r(shí)并行會(huì)采用全表掃描，效率肯定沒(méi)有索引掃描快。語(yǔ)句和執(zhí)行計(jì)劃如下：

成都創(chuàng)新互聯(lián)公司專(zhuān)注于企業(yè)營(yíng)銷(xiāo)型網(wǎng)站、網(wǎng)站重做改版、北塔網(wǎng)站定制設(shè)計(jì)、自適應(yīng)品牌網(wǎng)站建設(shè)、H5場(chǎng)景定制、商城網(wǎng)站開(kāi)發(fā)、集團(tuán)公司官網(wǎng)建設(shè)、外貿(mào)營(yíng)銷(xiāo)網(wǎng)站建設(shè)、高端網(wǎng)站制作、響應(yīng)式網(wǎng)頁(yè)設(shè)計(jì)等建站業(yè)務(wù)，價(jià)格優(yōu)惠性?xún)r(jià)比高，為北塔等各大城市提供網(wǎng)站開(kāi)發(fā)制作服務(wù)。

update /*+parallel(p_t,4)*/ p_t set name=(select /*+parallel(c_t,4)*/ name from c_t where p_t.id=c_t.id) where p_t.name is null;

常見(jiàn)的大數(shù)據(jù)分析工具有哪些？

大數(shù)據(jù)分析的前瞻性使得很多公司以及企業(yè)都開(kāi)始使用大數(shù)據(jù)分析對(duì)公司的決策做出幫助，而大數(shù)據(jù)分析是去分析海量的數(shù)據(jù)，所以就不得不借助一些工具去分析大數(shù)據(jù)，。一般來(lái)說(shuō)，數(shù)據(jù)分析工作中都是有很多層次的，這些層次分別是數(shù)據(jù)存儲(chǔ)層、數(shù)據(jù)報(bào)表層、數(shù)據(jù)分析層、數(shù)據(jù)展現(xiàn)層。對(duì)于不同的層次是有不同的工具進(jìn)行工作的。下面小編就對(duì)大數(shù)據(jù)分析工具給大家好好介紹一下。

首先我們從數(shù)據(jù)存儲(chǔ)來(lái)講數(shù)據(jù)分析的工具。我們?cè)诜治鰯?shù)據(jù)的時(shí)候首先需要存儲(chǔ)數(shù)據(jù)，數(shù)據(jù)的存儲(chǔ)是一個(gè)非常重要的事情，如果懂得數(shù)據(jù)庫(kù)技術(shù)，并且能夠操作好數(shù)據(jù)庫(kù)技術(shù)，這就能夠提高數(shù)據(jù)分析的效率。而數(shù)據(jù)存儲(chǔ)的工具主要是以下的工具。

1、MySQL數(shù)據(jù)庫(kù)，這個(gè)對(duì)于部門(mén)級(jí)或者互聯(lián)網(wǎng)的數(shù)據(jù)庫(kù)應(yīng)用是必要的，這個(gè)時(shí)候關(guān)鍵掌握數(shù)據(jù)庫(kù)的庫(kù)結(jié)構(gòu)和SQL語(yǔ)言的數(shù)據(jù)查詢(xún)能力。

2、SQL Server的最新版本，對(duì)中小企業(yè)，一些大型企業(yè)也可以采用SQL Server數(shù)據(jù)庫(kù)，其實(shí)這個(gè)時(shí)候本身除了數(shù)據(jù)存儲(chǔ)，也包括了數(shù)據(jù)報(bào)表和數(shù)據(jù)分析了，甚至數(shù)據(jù)挖掘工具都在其中了。

3、DB2，Oracle數(shù)據(jù)庫(kù)都是大型數(shù)據(jù)庫(kù)了，主要是企業(yè)級(jí)，特別是大型企業(yè)或者對(duì)數(shù)據(jù)海量存儲(chǔ)需求的就是必須的了，一般大型數(shù)據(jù)庫(kù)公司都提供非常好的數(shù)據(jù)整合應(yīng)用平臺(tái);

接著說(shuō)數(shù)據(jù)報(bào)表層。一般來(lái)說(shuō)，當(dāng)企業(yè)存儲(chǔ)了數(shù)據(jù)后，首先要解決報(bào)表的問(wèn)題。解決報(bào)表的問(wèn)題才能夠正確的分析好數(shù)據(jù)庫(kù)。關(guān)于數(shù)據(jù)報(bào)表所用到的數(shù)據(jù)分析工具就是以下的工具。

1、Crystal Report水晶報(bào)表，Bill報(bào)表，這都是全球最流行的報(bào)表工具，非常規(guī)范的報(bào)表設(shè)計(jì)思想，早期商業(yè)智能其實(shí)大部分人的理解就是報(bào)表系統(tǒng)，不借助IT技術(shù)人員就可以獲取企業(yè)各種信息——報(bào)表。

2、Tableau軟件，這個(gè)軟件是近年來(lái)非常棒的一個(gè)軟件，當(dāng)然它已經(jīng)不是單純的數(shù)據(jù)報(bào)表軟件了，而是更為可視化的數(shù)據(jù)分析軟件，因?yàn)楹芏嗳私?jīng)常用它來(lái)從數(shù)據(jù)庫(kù)中進(jìn)行報(bào)表和可視化分析。

第三說(shuō)的是數(shù)據(jù)分析層。這個(gè)層其實(shí)有很多分析工具，當(dāng)然我們最常用的就是Excel，我經(jīng)常用的就是統(tǒng)計(jì)分析和數(shù)據(jù)挖掘工具;

1、Excel軟件，首先版本越高越好用這是肯定的;當(dāng)然對(duì)Excel來(lái)講很多人只是掌握了5%Excel功能，Excel功能非常強(qiáng)大，甚至可以完成所有的統(tǒng)計(jì)分析工作!但是我也常說(shuō)，有能力把Excel玩成統(tǒng)計(jì)工具不如專(zhuān)門(mén)學(xué)會(huì)統(tǒng)計(jì)軟件;

2、SPSS軟件：當(dāng)前版本是18，名字也改成了PASW Statistics;我從3.0開(kāi)始Dos環(huán)境下編程分析，到現(xiàn)在版本的變遷也可以看出SPSS社會(huì)科學(xué)統(tǒng)計(jì)軟件包的變化，從重視醫(yī)學(xué)、化學(xué)等開(kāi)始越來(lái)越重視商業(yè)分析，現(xiàn)在已經(jīng)成為了預(yù)測(cè)分析軟件。

最后說(shuō)表現(xiàn)層的軟件。一般來(lái)說(shuō)表現(xiàn)層的軟件都是很實(shí)用的工具。表現(xiàn)層的軟件就是下面提到的內(nèi)容。

1、PowerPoint軟件：大部分人都是用PPT寫(xiě)報(bào)告。

2、Visio、SmartDraw軟件：這些都是非常好用的流程圖、營(yíng)銷(xiāo)圖表、地圖等，而且從這里可以得到很多零件;

3、Swiff Chart軟件：制作圖表的軟件，生成的是Flash

如何提高SQL Server大數(shù)據(jù)條件下的查詢(xún)速度？

1.關(guān)于索引優(yōu)化

建索引的選擇必須結(jié)合SQL查詢(xún)、修改、刪除語(yǔ)句的需要，一般的說(shuō)法是在WHERE里經(jīng)常出現(xiàn)的字段建索引。如果在WHERE經(jīng)常是幾個(gè)字段一起出現(xiàn)而且是用AND連接的，那就應(yīng)該建這幾個(gè)字段一起的聯(lián)合索引，而且次序也需要考慮，一般是最常出現(xiàn)的放前面，重復(fù)率低的放前面。

SQL

Server提供了一種簡(jiǎn)化并自動(dòng)維護(hù)數(shù)據(jù)庫(kù)的工具。這個(gè)稱(chēng)之為數(shù)據(jù)庫(kù)維護(hù)計(jì)劃向?qū)В―atabase

Maintenance

Plan

Wizard

，DMPW）的工具也包括了對(duì)索引的優(yōu)化。如果你運(yùn)行這個(gè)向?qū)?，你?huì)看到關(guān)于數(shù)據(jù)庫(kù)中關(guān)于索引的統(tǒng)計(jì)量，這些統(tǒng)計(jì)量作為日志工作并定時(shí)更新，這樣就減輕了手工重建索引或者DBCC

INDEXDEFRAG所帶來(lái)的工作量。如果你不想自動(dòng)定期刷新索引統(tǒng)計(jì)量，你還可以在DMPW中選擇重新組織數(shù)據(jù)和數(shù)據(jù)頁(yè)，這將停止舊有索引并按特定的填充因子重建索引。

2.

改善硬件（雙CPU，Raid

5，增加內(nèi)存）

tempdb這個(gè)臨時(shí)數(shù)據(jù)庫(kù)，它對(duì)性能的影響較大。tempdb和其他數(shù)據(jù)庫(kù)一樣可以增大，可以縮小。當(dāng)數(shù)據(jù)文件需要增長(zhǎng)的時(shí)候，通常不能保持剩余部分的連續(xù)性。這時(shí)文件就會(huì)產(chǎn)生碎片，這種碎片會(huì)造成性能下降。這種碎片屬于外來(lái)性碎片。要阻止在tempdb中產(chǎn)生外來(lái)性碎片，必須保證有足夠的硬盤(pán)空間。一般將tempdb的容量放到平均使用容量。而你也應(yīng)該允許tempdb自動(dòng)增長(zhǎng)，比如你有個(gè)一個(gè)超大的join操作，它建立了一個(gè)超過(guò)tempdb容量的時(shí)候，該查詢(xún)將失敗。你還要設(shè)置一個(gè)合理的單位增長(zhǎng)量。因?yàn)槿绻阍O(shè)得太小，將會(huì)產(chǎn)生許多外來(lái)性碎片，反而會(huì)占用更多資源。sqlserver調(diào)優(yōu)最有效的做法之一，就是把爭(zhēng)奪資源的操作獨(dú)立出去。tempdb就是一個(gè)需要獨(dú)立出去的部分而tempdb和其他系統(tǒng)庫(kù)一樣是公用的，是存取最可能頻繁的庫(kù)，所有處理臨時(shí)表、子查詢(xún)、GROUP

BY、排序、DISTINCT、連接等等。它最適合放到一個(gè)具有快速讀寫(xiě)能力的設(shè)備上。比如RAID0卷或RAID0+1卷上。

查詢(xún)語(yǔ)句一定要使用存儲(chǔ)過(guò)程；

3、查詢(xún)盡量使用TOP子句

4.將表按一定的約束分成子表,(如按分類(lèi))創(chuàng)建約束,在用Like

時(shí),先用分類(lèi)

and

like

,

應(yīng)該可能解決問(wèn)題.

而且效果立稈見(jiàn)影!(你要確定SQL會(huì)認(rèn)識(shí)你建的分區(qū)視圖).我一個(gè)表有上百萬(wàn)的記錄(700兆),用分區(qū)視圖后,查詢(xún)速度基本跟10萬(wàn)行一樣.

如果還是太慢,還可以考濾分布式分區(qū)視圖!這總可以解決問(wèn)題了吧!

關(guān)鍵在于你能否把大表按某種約束分解成子表.