PySpark: Configurando Spark no Google Colab
Data Become
0:00 / 0:00
PySpark: Configurando Spark no Google Colab
1 281 просмотр · 2 года назад
Data Become
313 подписчиков
1 281 просмотр · 2 года назад
Olá pessoal, no vídeo de hoje vamos ver como configurar um ambiente Spark com PySpark no Google Colab. O Google Colab é uma ótima ferramenta, com uma camada gratuita de serviços para desenvolver suas análises de dados utilizando notebooks.
De forma simples e prática vamos ver como configurar um ambiente de desenvolvimento e aprendizado seguindo 4 passos:
Instalando o Java
Baixando e instalando uma versão do Spark
Configurando variáveis de ambiente
Iniciando um ambiente com findspark
00:00:00 - Introdução
00:01:04 - Overview Google Colab
00:02:15 - Pré requisitos
00:03:30- Escolhendo a versão do Apache Spark
00:05:44 - Instalando Java 8
00:11:05 - Download do Apache Spark
00:14:20 - Configurando Variáveis e ambiente
00:17:14 - Criando Spark Session
00:20:16 - O pacote FindSpark
00:21:50- Conclusão testando o ambiente