MapReduce工作笔记——Job提交任务中-D和-jobconf的区别

时间:2022-07-24
本文章向大家介绍MapReduce工作笔记——Job提交任务中-D和-jobconf的区别,主要内容包括其使用实例、应用技巧、基本知识点总结和需要注意事项,具有一定的参考价值,需要的朋友可以参考一下。

在提交streaming程序时 -jobconf-D 均可以指定提交功能参数,但使用-D 时必须将次参数放置在所有参数之首,包括-file-input参数之前。

-D 是用来替代-jobconf的,-jobconf参数将被废弃,但在提交java中只能使用-D

总结

  1. -jobconf-D 本质上没有区别-D-jobconf的替代
  2. 一个job 中可以同时使用 -jobconf-D
  3. 但是如果job中有-D参数,那么一定要把所有的-D参数写在所有参数前面,要不然会报错。