Spark 2: Použití vlastního jiskru odeslat skript SparkLauncher

hlasů
0

Dívám se používat vlastní jiskra odeslat jako skript (ale s jiným názvem) předložit Spark úlohu pomocí „ SparkLauncher

Problém je v tom, že výchozí createBuilder()metoda pevný kódy názvem skriptu v SparkLauncher.class.

Existuje způsob, jak přinutit API používat svůj vlastní scénář, řekněme custom-spark-submit?

 private ProcessBuilder createBuilder() {
        List<String> cmd = new ArrayList();
        String script = CommandBuilderUtils.isWindows() ? spark-submit.cmd : spark-submit;
Položena 27/11/2018 v 17:58
zdroj uživatelem
V jiných jazycích...                            

Cookies help us deliver our services. By using our services, you agree to our use of cookies. Learn more