在
--jars刚刚作品; 问题是我一开始如何
spark-submit工作;正确的执行方式是:
./bin/spark-submit <options> scriptname
因此,
--jars必须将选项放在脚本之前:
./bin/spark-submit --jars /path/to/my.jar myscript.py
如果您认为这是将参数传递给脚本本身的唯一方法,那么这很明显,因为脚本名称后面的所有内容都将用作脚本的输入参数:
./bin/spark-submit --jars /path/to/my.jar myscript.py --do-magic=true



