MapReduce工作笔记——Streaming Job中jar包上传与使用指定

时间:2022-07-24
本文章向大家介绍MapReduce工作笔记——Streaming Job中jar包上传与使用指定,主要内容包括其使用实例、应用技巧、基本知识点总结和需要注意事项,具有一定的参考价值,需要的朋友可以参考一下。

1. 第三方jar包上传

使用-libjars上传用户指定的jar包并加入classpath中(多个jar包以逗号分隔)

Code.1.1 file 上传示例

-libjars mysql-connector-java.jar

2. 用户jar 包的指定使用

Code.2.1 指定使用用户上传的jar包

-D mapreduce.user.classpath.first=true
# 默认是false