ResourceManager 資源管理 只有一個(資源以Container表示)
ApplicationMaster 應用管理 用戶每提交一個application都包含一個ApplicationMaster
NodeManager 每個節(jié)點對應一個
ApplicationMaster 啟動后向ResourceManager要資源
每個Executor對應一個Container
每個SparkContext有一個ApplicationMaster
spark支持的兩種模式區(qū)別 Spark Driver運行在哪兒
yarn-cluster(YarnClusterScheduler) (driver和ApplicationMaster運行在一起,client看不到運行結(jié)果)
yarn-client (YarnClientClusterScheduler)(driver和client運行在一起,適用于終端返回結(jié)果)
另外有需要云服務器可以了解下創(chuàng)新互聯(lián)scvps.cn,海內(nèi)外云服務器15元起步,三天無理由+7*72小時售后在線,公司持有idc許可證,提供“云服務器、裸金屬服務器、高防服務器、香港服務器、美國服務器、虛擬主機、免備案服務器”等云主機租用服務以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡單易用、服務可用性高、性價比高”等特點與優(yōu)勢,專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應用場景需求。
文章標題:Sparkonyarn-創(chuàng)新互聯(lián)
URL標題:http://redsoil1982.com.cn/article4/dipdie.html
成都網(wǎng)站建設公司_創(chuàng)新互聯(lián),為您提供微信小程序、企業(yè)建站、外貿(mào)建站、App開發(fā)、ChatGPT、品牌網(wǎng)站建設
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)