Quand je lance mon travail d’étincelle depuis un IDE en utilisant Spark "sLes API Java, je reçois la sortie dans un format de codage souhaité (utf-8). Mais si je lance la méthode "spark-submit" à partir de la ligne de commande, la sortie manque sur le codage.
Existe-t-il un moyen de forcer le codage à "spark-submit" lorsqu'il est utilisé via l'interface de ligne de commande.
J'utilise Windows 10 OS et Eclipse IDE.
Votre aide sera vraiment appréciée.
Je vous remercie.
Réponses:
2 pour la réponse № 1Exécutez votre travail Spark comme ceci:
spark-submit --class com.something.class --name "someName" --conf "spark.driver.extraJavaOptions=-Dfile.encoding=utf-8"