Instalacao Local

A intenção neste segmento não é detalhar o passo a passo da instalação do Spark, uma vez que há uma vasta gama de recursos disponíveis online que já abordam este tópico de maneira competente. Neste espaço, busco fazer observações específicas sobre as precauções a serem tomadas durante o processo de instalação e configuração. Se você está em busca de instruções detalhadas, vou listar alguns sites que considerei úteis ao realizar minha própria instalação.

O que preciso baixar?

• Spark - Apache Official
  
• Hadoop - Winutils
  
• Java (versão 8 ou superior) - Oracle
  
  

Cuidados

• Garanta que o PATH do Spark, Hadoop e Java estejam corretamente configurados.
• Após instalar os componentes necessários, execute o comando pip install pyspark.

Referências

Instalação de PySpark - Medium
Executando PySpark no Windows - SparkByExamples
Guia de Instalação do Spark - CrayonData