在大型企業(yè)中,由于業(yè)務(wù)復(fù)雜、數(shù)據(jù)量大、數(shù)據(jù)格式不同、數(shù)據(jù)交互格式繁雜,并非所有的操作都能通過交互界面進(jìn)行處理。而有一些操作需要定期讀取大批量的數(shù)據(jù),然后進(jìn)行一系列的后續(xù)處理。這樣的過程就是“批處理”。
成都創(chuàng)新互聯(lián)網(wǎng)站建設(shè)由有經(jīng)驗的網(wǎng)站設(shè)計師、開發(fā)人員和項目經(jīng)理組成的專業(yè)建站團(tuán)隊,負(fù)責(zé)網(wǎng)站視覺設(shè)計、用戶體驗優(yōu)化、交互設(shè)計和前端開發(fā)等方面的工作,以確保網(wǎng)站外觀精美、網(wǎng)站制作、成都網(wǎng)站設(shè)計易于使用并且具有良好的響應(yīng)性。批處理應(yīng)用通常有以下特點:
什么是Spring batch
Spring batch是一個輕量級的全面的批處理框架,它專為大型企業(yè)而設(shè)計,幫助開發(fā)健壯的批處理應(yīng)用。Spring batch為處理大批量數(shù)據(jù)提供了很多必要的可重用的功能,比如日志追蹤、事務(wù)管理、job執(zhí)行統(tǒng)計、重啟job和資源管理等。同時它也提供了優(yōu)化和分片技術(shù)用于實現(xiàn)高性能的批處理任務(wù)。
它的核心功能包括:
筆者所在的部門屬于國外某大型金融公司的CRM部門,在日常工作中我們經(jīng)常需要開發(fā)一些批處理應(yīng)用,對Spring Batch有著豐富的使用經(jīng)驗。近段時間筆者特意總結(jié)了這些經(jīng)驗。
使用Spring Batch 3.0以及Spring Boot
在使用Spring Batch時推薦使用最新的Spring Batch 3.0版本。相比Spring Batch3.2,它做了以下方面的提升:
支持Spring4和Java8是一個重大的提升。這樣就可以使用Spring4引入的Spring boot組件,從而開發(fā)效率方面有了一個質(zhì)的飛躍。引入Spring-batch框架只需要在build.gradle中加入一行代碼即可:
compile("org.springframework.boot:spring-boot-starter-batch")