spark 怎么獲取jobid
1 回答
慕姐4208626
TA貢獻(xiàn)1852條經(jīng)驗 獲得超7個贊
不知道你問的是框架層還是應(yīng)用層？應(yīng)用層無法獲取Spark的JobID。
框架層，action操作觸發(fā)SparkContext執(zhí)行runJob方法，SparkContext會維護(hù)一個AtomicInteger對象，對象名稱為nextJobId，該對象通過調(diào)用getAndIncrement()生成JobID。
- 1 回答
- 0 關(guān)注
- 2433 瀏覽
添加回答
舉報
0/150
提交
取消