這篇文章主要介紹“如何測試Spark集群”，在日常操作中，相信很多人在如何測試Spark集群問題上存在疑惑，小編查閱了各式資料，整理出簡單好用的操作方法，希望對大家解答”如何測試Spark集群”的疑惑有所幫助！接下來，請跟著小編一起來學(xué)習(xí)吧！

創(chuàng)新互聯(lián)建站主營鎮(zhèn)海網(wǎng)站建設(shè)的網(wǎng)絡(luò)公司,主營網(wǎng)站建設(shè)方案,成都app軟件開發(fā),鎮(zhèn)海h5成都小程序開發(fā)搭建,鎮(zhèn)海網(wǎng)站營銷推廣歡迎鎮(zhèn)海等地區(qū)企業(yè)咨詢

測試Spark集群

把Spark安裝包下的”README.txt”上傳到

通過hdfs的web控制臺可以發(fā)現(xiàn)成功上傳了文件：

使用“MASTER:spark://SparkMaster:7077 ./spark-shell”命令啟動Spark shell：

接下來通過以下命令讀取剛剛上傳到HDFS上的“README.md”文件 ：

對讀取的文件進行以下操作：

接下來使用collect命令提交并執(zhí)行Job：

到此，關(guān)于“如何測試Spark集群”的學(xué)習(xí)就結(jié)束了，希望能夠解決大家的疑惑。理論與實踐的搭配能更好的幫助大家學(xué)習(xí)，快去試試吧！若想繼續(xù)學(xué)習(xí)更多相關(guān)知識，請繼續(xù)關(guān)注創(chuàng)新互聯(lián)網(wǎng)站，小編會繼續(xù)努力為大家?guī)砀鄬嵱玫奈恼拢?/p>
當前名稱：如何?測試Spark集群
網(wǎng)頁地址：http://weahome.cn/article/pecheo.html