真实的国产乱ⅩXXX66竹夫人,五月香六月婷婷激情综合,亚洲日本VA一区二区三区,亚洲精品一区二区三区麻豆

成都創(chuàng)新互聯(lián)網(wǎng)站制作重慶分公司

Java并發(fā)計數(shù)器的深入理解

前言

公司主營業(yè)務(wù):成都網(wǎng)站設(shè)計、成都做網(wǎng)站、外貿(mào)網(wǎng)站建設(shè)、移動網(wǎng)站開發(fā)等業(yè)務(wù)。幫助企業(yè)客戶真正實現(xiàn)互聯(lián)網(wǎng)宣傳,提高企業(yè)的競爭能力。創(chuàng)新互聯(lián)是一支青春激揚、勤奮敬業(yè)、活力青春激揚、勤奮敬業(yè)、活力澎湃、和諧高效的團隊。公司秉承以“開放、自由、嚴謹、自律”為核心的企業(yè)文化,感謝他們對我們的高要求,感謝他們從不同領(lǐng)域給我們帶來的挑戰(zhàn),讓我們激情的團隊有機會用頭腦與智慧不斷的給客戶帶來驚喜。創(chuàng)新互聯(lián)推出岱山免費做網(wǎng)站回饋大家。

一提到線程安全的并發(fā)計數(shù)器,AtomicLong 必然是第一個被聯(lián)想到的工具。Atomic* 一系列的原子類以及它們背后的 CAS 無鎖算法,常常是高性能,高并發(fā)的代名詞。本文將會闡釋,在并發(fā)場景下,使用 AtomicLong 來充當(dāng)并發(fā)計數(shù)器將會是一個糟糕的設(shè)計,實際上存在不少 AtomicLong 之外的計數(shù)器方案。近期我研究了一些 Jdk1.8 以及 JCTools 的優(yōu)化方案,并將它們的對比與實現(xiàn)細節(jié)整理于此。

閱讀本文前

本文相關(guān)的基準測試代碼均可在博主的 github 中找到,測試方式全部采用 JMH,這篇文章可以幫助你入門 JMH。

AtomicLong 的前世今生

在 Java 中,Atomic* 是高效的,這得益于 sun.misc.Unsafe 提供的一系列底層 API,使得 Java 這樣的高級語言能夠直接和硬件層面的 CPU 指令打交道。并且在 Jdk1.7 中,這樣的底層指令可以配合 CAS 操作,達到 Lock-Free。

在 Jdk1.7 中,AtomicLong 的關(guān)鍵代碼如下:

public final long getAndIncrement() {
 while (true) {
 long current = get();
 long next = current + 1;
 if (compareAndSet(current, next))
  return current;
 }
}

public final boolean compareAndSet(long expect, long update) {
 return unsafe.compareAndSwapLong(this, valueOffset, expect, update);
}
  1. get() 方法 volatile 讀當(dāng)前 long 值
  2. 自增
  3. 自旋判斷新值與當(dāng)前值
  4. 自旋成功,返回;否則返回 1

我們特別留意到 Jdk1.7 中 unsafe 使用的方法是 compareAndSwapLong,它與 x86 CPU 上的 LOCK CMPXCHG 指令對應(yīng),并且在應(yīng)用層使用 while(true) 完成自旋,這個細節(jié)在 Jdk1.8 中發(fā)生了變化。

在 Jdk1.8 中,AtomicLong 的關(guān)鍵代碼如下:

public final long getAndIncrement() {
 return unsafe.getAndAddLong(this, valueOffset, 1L);
}

Jdk1.7 的 CAS 操作已經(jīng)不復(fù)存在了,轉(zhuǎn)而使用了 getAndAddLong 方法,它與 x86 CPU 上的 LOCK XADD 指令對應(yīng),以原子方式返回當(dāng)前值并遞增(fetch and add)。

當(dāng)問及 Atomic* 高效的原因,回答 CAS 是不夠全面且不夠嚴謹?shù)?,Jdk1.7 的 unsafe.compareAndSwapLong 以及 Jdk1.8 的 unsafe.getAndAddLong 才是關(guān)鍵,且 Jdk1.8 中不存在 CAS。

Jdk1.8 AtomicLong 相比 Jdk1.7 AtomicLong 的表現(xiàn)是要優(yōu)秀的,這點我們將在后續(xù)的測評中見證。

AtomicLong 真的高效嗎?

無論在 Jdk1.7 還是 Jdk1.8 中,Atomic* 的開銷都是很大的,主要體現(xiàn)在:

  1. 高并發(fā)下,CAS 操作可能會頻繁失敗,真正更新成功的線程占少數(shù)。(Jdk1.7 獨有的問題)
  2. 我之前的文章中介紹過“偽共享” (false sharing) 問題,但在 CAS 中,問題則表現(xiàn)的更為直接,這是“真共享”,與”偽共享“存在相同的問題:緩存行失效,緩存一致性開銷變大。
  3. 底層指令的開銷不見得很低,無論是 LOCK XADD 還是 LOCK CMPXCHG,想深究的朋友可以參考 instruction_tables ,(這一點可能有點鉆牛角尖,但不失為一個角度去分析高并發(fā)下可行的優(yōu)化)
  4. Atomic* 所做的,比我們的訴求可能更大,有時候我們只需要計數(shù)器具備線程安全地遞增這樣的特性,但 Atomic* 的相關(guān)操作每一次都伴隨著值的返回。他是個帶返回值的方法,而不是 void 方法,而多做了活大概率意味著額外的開銷。

拋開上述導(dǎo)致 AtomicLong 慢的原因,AtomicLong 仍然具備優(yōu)勢:

  1. 上述的第 4 點換一個角度也是 AtomicLong 的有點,相比下面要介紹的其他計數(shù)器方案,AtomicLong 能夠保證每次操作都精確的返回真實的遞增值。你可以借助 AtomicLong 來做并發(fā)場景下的遞增序列號方案,注意,本文主要討論的是計數(shù)器方案,而不是序列號方案。
  2. 實現(xiàn)簡單,回到那句話:“簡單的架構(gòu)通常性能不高,高性能的架構(gòu)通常復(fù)雜度很高”,AtomicLong 屬于性能相對較高,但實現(xiàn)極其簡單的那種方案,因為大部分的復(fù)雜性,由 JMM 和 JNI 方法屏蔽了。相比下面要介紹的其他計數(shù)器實現(xiàn),AtomicLong 真的太“簡易”了。

看一組 AtomicLong 在不同并發(fā)量下的性能表現(xiàn):

Java并發(fā)計數(shù)器的深入理解

橫向?qū)Ρ?,寫的性能相比讀的性能要差很多,在 20 個線程下寫性能比讀性能差距了 4~5 倍。

縱向?qū)Ρ?,主要關(guān)注并發(fā)寫,線程競爭激烈的情況下,單次自增耗時從 22 ns 增長為了 488 ns,有明顯的性能下降。

實際場景中,我們需要統(tǒng)計系統(tǒng)的 qps、接口調(diào)用次數(shù),都需要使用到計數(shù)的功能,寫才是關(guān)鍵,并不是每時每刻都需要關(guān)注自增后的返回值,而 AtomicLong 恰恰在核心的寫性能上有所欠缺。由此引出其他計數(shù)器方案。

認識 LongAdder

Doug Lea 在 JDK1.8 中找到了一個上述問題的解決方案,他實現(xiàn)了一個 LongAdder 類。

@since 1.8
@author Doug Lea
public class LongAdder extends Striped64 implements Serializable {}

LongAdder 的 API 如下

Java并發(fā)計數(shù)器的深入理解

LongAdder

你應(yīng)當(dāng)發(fā)現(xiàn),LongAdder 和 AtomicLong 明顯的區(qū)別在于,increment 是一個 void 方法。直接來看看 LongAdder 的性能表現(xiàn)如何。(LA = LongAdder, AL = AtomicLong, 單位 ns/op):

Java并發(fā)計數(shù)器的深入理解

我們從中可以發(fā)現(xiàn)一些有意思的現(xiàn)象,網(wǎng)上不少很多文章沒有從讀寫上對比二者,直接宣稱 LongAdder 性能優(yōu)于 AtomicLong,其實不太嚴謹。在單線程下,并發(fā)問題沒有暴露,兩者沒有體現(xiàn)出差距;隨著并發(fā)量加大,LongAdder 的 increment 操作更加優(yōu)秀,而 AtomicLong 的 get 操作則更加優(yōu)秀。鑒于在計數(shù)器場景下的特點—寫多讀少,所以寫性能更高的 LongAdder 更加適合。

LongAdder 寫速度快的背后

網(wǎng)上分析 LongAdder 源碼的文章并不少,我不打算詳細分析源碼,而是挑選了一些必要的細節(jié)以及多數(shù)文章沒有提及但我認為值得分析的內(nèi)容。

1、Cell 設(shè)計減少并發(fā)修改時的沖突

Java并發(fā)計數(shù)器的深入理解
LongAdder

在 LongAdder 的父類 Striped64 中存在一個 volatile Cell[] cells; 數(shù)組,其長度是 2 的冪次方,每個 Cell 都填充了一個 @Contended 的 Long 字段,為了避免偽共享問題。

@sun.misc.Contended static final class Cell {
 volatile long value;
 Cell(long x) { value = x; }
 // ... ignore
}

LongAdder 通過一系列算法,將計數(shù)結(jié)果分散在了多個 Cell 中,Cell 會隨著并發(fā)量升高時發(fā)生擴容,最壞情況下 Cell == CPU core 的數(shù)量。Cell 也是 LongAdder 高效的關(guān)鍵,它將計數(shù)的總值分散在了各個 Cell 中,例如 5 = 3 + 2,下一刻,某個線程完成了 3 + (2 + 1) = 6 的操作,而不是在 5 的基礎(chǔ)上完成直接相加操作。通過 LongAdder 的 sum() 方法可以直觀的感受到這一點(LongAdder 不存在 get 方法)

public long sum() {
 Cell[] as = cells; Cell a;
 long sum = base;
 if (as != null) {
 for (int i = 0; i < as.length; ++i) {
  if ((a = as[i]) != null)
  sum += a.value;
 }
 }
 return sum;
}

這種惰性求值的思想,在 ConcurrentHashMap 中的 size() 中也存在,畢竟他們的作者都是 Doug Lea。

2、并發(fā)場景下高效獲取隨機數(shù)

LongAdder 內(nèi)部算法需要獲取隨機數(shù),而 Random 類在并發(fā)場景下也是可以優(yōu)化的。

ThreadLocalRandom random = ThreadLocalRandom.current();
random.nextInt(5);

使用 ThreadLocalRandom 替代 Random,同樣出現(xiàn)在了 LongAdder 的代碼中。

3、longAccumulate

longAccumulate 方法是 LongAdder 的核心方法,內(nèi)部存在大量的分支判斷。首先和 Jdk1.7 的 AtomicLong 一樣,它使用的是 UNSAFE.compareAndSwapLong 來完成自旋,不同之處在于,其在初次 cas 方式失敗的情況下(說明多個線程同時想更新這個值),嘗試將這個值分隔成多個 Cell,讓這些競爭的線程只負責(zé)更新自己所屬的 Cell,這樣將競爭壓力分散開。

LongAdder 的前世今生

其實在 Jdk1.7 時代,LongAdder 還未誕生時,就有一些人想著自己去實現(xiàn)一個高性能的計數(shù)器了,比如一款 Java 性能監(jiān)控框架 dropwizard/metrics 就做了這樣事,在早期版本中,其優(yōu)化手段并沒有 Jdk1.8 的 LongAdder 豐富,而在 metrics 的最新版本中,其已經(jīng)使用 Jdk1.8 的 LongAdder 替換掉了自己的輪子。在最后的測評中,我們將 metrics 版本的 LongAdder 也作為一個參考對象。

JCTools 中的 ConcurrentAutoTable

并非只有 LongAdder 考慮到了并發(fā)場景下計數(shù)器的優(yōu)化,大名鼎鼎的并發(fā)容器框架 JCTool 中也提供了和今天主題相關(guān)的實現(xiàn),雖然其名稱和 Counter 看似沒有關(guān)系,但通過其 Java 文檔和 API ,可以發(fā)現(xiàn)其設(shè)計意圖考慮到了計數(shù)器的場景。

An auto-resizing table of longs, supporting low-contention CAS operations.Updates are done with CAS's to no particular table element.The intent is to support highly scalable counters , r/w locks, and other structures where the updates are associative, loss-free (no-brainer), and otherwise happen at such a high volume that the cache contention for CAS'ing a single word is unacceptable.

Java并發(fā)計數(shù)器的深入理解
ConcurrentAutoTable

在最后的測評中,我們將 JCTools 的 ConcurrentAutoTable 也作為一個參考對象。

最終測評

Jdk1.7 的 AtomicLong,Jdk1.8 的 AtomicLong,Jdk 1.8 的 LongAdder,Metrics 的 LongAdder,JCTools 的 ConcurrentAutoTable,我對這五種類型的計數(shù)器使用 JMH 進行基準測試。

public interface Counter {
 void inc();
 long get();
}

將 5 個類都適配成 Counter 接口的實現(xiàn)類,采用 @State(Scope.Group),@Group 將各組測試用例進行隔離,盡可能地排除了互相之間的干擾,由于計數(shù)器場景的特性,我安排了 20 個線程進行并發(fā)寫,1 個線程與之前的寫線程共存,進行并發(fā)讀。Mode=avgt 代表測試的是方法的耗時,越低代表性能越高。

Benchmark                      (counterType)  Mode  Cnt     Score       Error  Units
CounterBenchmark.rw                  Atomic7  avgt    3  1049.906 ±  2146.838  ns/op
CounterBenchmark.rw:get              Atomic7  avgt    3   143.352 ±   125.388  ns/op
CounterBenchmark.rw:inc              Atomic7  avgt    3  1095.234 ±  2247.913  ns/op
CounterBenchmark.rw                  Atomic8  avgt    3   441.837 ±   364.270  ns/op
CounterBenchmark.rw:get              Atomic8  avgt    3   149.817 ±    66.134  ns/op
CounterBenchmark.rw:inc              Atomic8  avgt    3   456.438 ±   384.646  ns/op
CounterBenchmark.rw      ConcurrentAutoTable  avgt    3   144.490 ±   577.390  ns/op
CounterBenchmark.rw:get  ConcurrentAutoTable  avgt    3  1243.494 ± 14313.764  ns/op
CounterBenchmark.rw:inc  ConcurrentAutoTable  avgt    3    89.540 ±   166.375  ns/op
CounterBenchmark.rw         LongAdderMetrics  avgt    3   105.736 ±   114.330  ns/op
CounterBenchmark.rw:get     LongAdderMetrics  avgt    3   313.087 ±   307.381  ns/op
CounterBenchmark.rw:inc     LongAdderMetrics  avgt    3    95.369 ±   132.379  ns/op
CounterBenchmark.rw               LongAdder8  avgt    3    98.338 ±    80.112  ns/op
CounterBenchmark.rw:get           LongAdder8  avgt    3   274.169 ±   113.247  ns/op
CounterBenchmark.rw:inc           LongAdder8  avgt    3    89.547 ±    78.720  ns/op

如果我們只關(guān)注 inc 即寫性能,可以發(fā)現(xiàn) jdk1.8 的 LongAdder 表現(xiàn)的最為優(yōu)秀,ConcurrentAutoTable 以及兩個版本的 LongAdder 在一個數(shù)量級之上;1.8 的 AtomicLong 相比 1.7 的 AtomicLong 優(yōu)秀很多,可以得出這樣的結(jié)論,1.7 的 CAS+LOCK CMPXCHG 方案的確不如 1.8 的 LOCK XADD 來的優(yōu)秀,但如果與特地優(yōu)化過的其他計數(shù)器方案來進行比較,便相形見絀了。

如果關(guān)注 get 性能,雖然這意義不大,但可以見得,AtomicLong 的 get 性能在高并發(fā)下表現(xiàn)依舊優(yōu)秀,而 LongAdder 組合求值的特性,導(dǎo)致其性能必然存在一定下降,位列第二梯隊,而 ConcurrentAutoTable 的并發(fā)讀性能最差。

關(guān)注整體性能,CounterBenchmark.rw 是對一組場景的整合打分,可以發(fā)現(xiàn),在我們模擬的高并發(fā)計數(shù)器場景下,1.8 的 LongAdder 獲得整體最低的延遲 98 ns,相比性能最差的 Jdk1.7 AtomicLong 實現(xiàn),高了整整 10 倍有余,并且,隨著并發(fā)度提升,這個數(shù)值還會增大。

AtomicLong 可以被廢棄嗎?

既然 LongAdder 的性能高出 AtomicLong 這么多,我們還有理由使用 AtomicLong 嗎?

本文重點討論的角度還是比較局限的:單機場景下并發(fā)計數(shù)器的高效實現(xiàn)。AtomicLong 依然在很多場景下有其存在的價值,例如一個內(nèi)存中的序列號生成器,AtomicLong 可以滿足每次遞增之后都精準的返回其遞增值,而 LongAdder 并不具備這樣的特性。LongAdder 為了性能而喪失了一部分功能,這體現(xiàn)了計算機的哲學(xué),無處不在的 trade off。

高性能計數(shù)器總結(jié)

AtomicLong :并發(fā)場景下讀性能優(yōu)秀,寫性能急劇下降,不適合作為高性能的計數(shù)器方案。內(nèi)存需求量少。

LongAdder :并發(fā)場景下寫性能優(yōu)秀,讀性能由于組合求值的原因,不如直接讀值的方案,但由于計數(shù)器場景寫多讀少的緣故,整體性能在幾個方案中最優(yōu),是高性能計數(shù)器的首選方案。由于 Cells 數(shù)組以及緩存行填充的緣故,占用內(nèi)存較大。

ConcurrentAutoTable :擁有和 LongAdder 相近的寫入性能,讀性能則更加不如 LongAdder。它的使用需要引入 JCTools 依賴,相比 Jdk 自帶的 LongAdder 并沒有優(yōu)勢。但額外說明一點,ConcurrentAutoTable 的使用并非局限于計數(shù)器場景,其仍然存在很大的價值。

在前面提到的性能監(jiān)控框架 Metrics,以及著名的熔斷框架 Hystrix 中,都存在 LongAdder 的使用場景,有興趣的朋友快去實踐一下 LongAdder 吧。

總結(jié)

以上就是這篇文章的全部內(nèi)容了,希望本文的內(nèi)容對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,謝謝大家對創(chuàng)新互聯(lián)的支持。


文章標(biāo)題:Java并發(fā)計數(shù)器的深入理解
文章網(wǎng)址:http://weahome.cn/article/ghoiij.html

其他資訊

在線咨詢

微信咨詢

電話咨詢

028-86922220(工作日)

18980820575(7×24)

提交需求

返回頂部