Solución de problemas de errores del programa Spark: se debe establecer una URL maestra en su configuración

Spark Program Error Troubleshooting

Hoy, probé el programa Spark localmente y hice clic para ejecutar el método principal, y se informó el siguiente error: (la versión Spark es 2.1.1)

|_+_|

El motivo de este error es que no hay ningún maestro en el que se esté ejecutando el programa y se requiere la configuración correspondiente.

Los maestros pasados ​​a chispa son los siguientes:

|_+_|

Hay dos formas de configurar Spark Master localmente:

1. Configurar a través del código de chispa

Se puede configurar con el siguiente código:

|_+_| |_+_|

2. Configure estableciendo los parámetros operativos de la JVM

Haga clic en editar configuración en la idea, seleccione el proyecto que debe configurarse con los parámetros a la izquierda y luego ingrese '-Dspark.master = local' en las opciones de VM a la derecha para indicarle a este programa que se ejecute localmente en un solo hilo , simplemente ejecútelo de nuevo.