多多色-多人伦交性欧美在线观看-多人伦精品一区二区三区视频-多色视频-免费黄色视屏网站-免费黄色在线

國內(nèi)最全IT社區(qū)平臺 聯(lián)系我們 | 收藏本站
阿里云優(yōu)惠2
您當前位置:首頁 > 服務(wù)器 > Hadoop get JobId

Hadoop get JobId

來源:程序員人生   發(fā)布時間:2016-06-04 08:56:02 閱讀次數(shù):2982次

軟件版本:hadoop2.6.4 ; jdk1.7,eclipse:Myeclipse2014;


問題描寫:在進行MR任務(wù)提交的時候,想獲得每次提交任務(wù)的jobId,這樣在提交任務(wù)后,就能夠根據(jù)此JobId來獲得MR任務(wù)的進度了。

解決方案:

1. 之前想過的1種方式是:直接獲得所有完成的JobID 列表,然后對其進行排序,取其最大的,接著使用最大的jobId來構(gòu)造下1個jobId;但是這樣會有問題,參考:http://blog.csdn.net/fansy1990/article/details/17426945 ;問題是當集群是第1次啟動的時候,這個時候是沒有已完成JobId的列表的,所以想到了使用獲得集群啟動時間的解決辦法,也就是剛才的鏈接內(nèi)容;

2. 第2種方式是:既然提交MR任務(wù)的時候可以獲得Job參數(shù),那末是不是可以通過該job參數(shù)來獲得jobID呢?Job在調(diào)用job.waitForComplete后才會去集群中獲得jobId ,并且此jobid在每次調(diào)用的時候都會遞增1,而不管任務(wù)時候完成,即如果在jobId獲得后的地方加個斷點:

生活不易,碼農(nóng)辛苦
如果您覺得本網(wǎng)站對您的學習有所幫助,可以手機掃描二維碼進行捐贈
程序員人生
------分隔線----------------------------
分享到:
------分隔線----------------------------
關(guān)閉
程序員人生
主站蜘蛛池模板: 国产精品嫩草影院在线 | 一级毛片视频免费观看 | 波多野结衣视频在线播放 | 免费看在线爱爱小视频 | 欧美成人hd | 亚洲一级视频在线观看 | 一级毛片免费毛片毛片 | 中文字幕乱码二三区免费 | 欧美激情校园春色 | 亚洲免费一区二区 | 国产福利一区二区精品视频 | 一区影院| 国产精品视频久久久久 | 欧美人成人亚洲专区中文字幕 | 国产精品日韩欧美 | 中文字幕一区二区三区 精品 | 亚洲另类精品xxxx人妖 | 欧美日韩亚 | 日韩久久精品一区二区三区 | 欧美高清videosfreeⅹ | 综合精品一区 | 国产精品久久久久久免费 | 国产做人爱三级视频在线 | 亚洲制服一区 | 欧美videos粗暴 | 国产福利在线看 | 国产欧美久久久精品 | 欧美成人手机视频免费播放 | 一级日本特黄毛片视频 | 3www黄| 性欧美高清极品xx | 国产精品国产三级国产专不∫ | 亚洲一区视频 | 亚洲在线观看免费视频 | 久草在线新首页 | 精品影视网站入口 | 日本天堂在线 | 亚洲精品高清视频 | 欧洲成人在线视频 | 国产国产成人精品久久 | 亚洲欧美日韩网站 |