Ecosyste.ms: Repos
An open API service providing repository metadata for many open source software ecosystems.
GitHub topics: engenharia-de-dados
matheussooares/make-data-netflix
Pipeline de Dados: usandoa linguagem python construir a técnica ETL (extrair, transformar e carregar).
Language: Python - Size: 95.7 KB - Last synced: 26 days ago - Pushed: 26 days ago - Stars: 1 - Forks: 0
olucaslopes/BNMP-Scraper
Navega pela API do Portal BNMP coletando dados
Language: Python - Size: 211 KB - Last synced: about 1 month ago - Pushed: 6 months ago - Stars: 5 - Forks: 3
ewertondrigues02/Engenharia-de-Dados
Varios Projetos de Engenharia de Dados usando principais ferramentas como: Airflow, Snowflake, dbt, Postrgres, Looker Studio, Power BI
Language: Python - Size: 215 KB - Last synced: 2 months ago - Pushed: 2 months ago - Stars: 0 - Forks: 0
dougdss89/elt_dimensao
Meu projeto de ETL
Language: TSQL - Size: 86.9 KB - Last synced: 4 months ago - Pushed: 4 months ago - Stars: 0 - Forks: 0
olwr/jornada_sc23
Minha jornada e anotações do Santander Coders 2023 2° Edição. Trilha Digital | Engenheiro de Dados
Size: 2.93 KB - Last synced: 7 months ago - Pushed: 7 months ago - Stars: 0 - Forks: 0
strangercacaus/bootcamp_eng_dados_how_2023
Compilado de projetos desenvolvidos durante o Bootcamp de Engenharia de Dados da How Bootcamps em 2023
Language: Python - Size: 48.2 MB - Last synced: 8 months ago - Pushed: 8 months ago - Stars: 0 - Forks: 0
kh4r00n/Engenharia-de-Dados-_Projeto-Final-Soul-Code-Academy
# Tema: Saúde ### Contexto O Projeto Final do Curso de Engenharia de Dados da SoulCode Academy consiste no ETL(Extract, Transform and Load) de 2 Datasets escolhidos pela equipe de acordo com o tema. Onde os dois arquivos devem ser tratados, modelados organizados com a utilização das tecnologias vistas ao longo do curso, Google Cloud Platform, Python, Pandas, PySpark, SparkSQL, Cloud Storage, Big Query e Data Studio. Além do processo de ETL foi feita a análise dos Dados para gerar insights a partir deles. ### Datasets Os Datasets foram escolhidos a partir do site [https://www.data.gov/](https://www.data.gov/), um site que armazenar dados abertos do Governo dos Estados Unidos. Os datasets selecionados foram os dados de Hospitalização por COVID-19 dos Condados de Connecticut em JSON e os dados de Vacinação dos Condados de Connecticut em CSV.
Language: Jupyter Notebook - Size: 9.76 MB - Last synced: 8 months ago - Pushed: over 2 years ago - Stars: 4 - Forks: 0
andersonesanto/igti-edd-m5-desafio
IGTI Enhenheiro de Dados - Módulo 5 Desafio Final
Language: Jupyter Notebook - Size: 38.1 KB - Last synced: 9 months ago - Pushed: over 2 years ago - Stars: 0 - Forks: 0
andersonesanto/igti-pa-repositorio-logs
IGTI MBA Engenharia de dados - Projeto Aplicado - Repositório de logs
Language: Dockerfile - Size: 13.7 KB - Last synced: 9 months ago - Pushed: over 1 year ago - Stars: 0 - Forks: 0
andersonesanto/edcdict
Dicionário de ferramentas para Engenharia de dados
Size: 31.3 KB - Last synced: 9 months ago - Pushed: almost 3 years ago - Stars: 2 - Forks: 0
andersonesanto/igti-ed-m4-pld-tp
IGTI MBA Engenheiro de dados - BootCamp Engenheiro de Dados - Módulo 4 - PLD Pipelines de Dados - Trabalho Prático
Language: Jupyter Notebook - Size: 6.84 KB - Last synced: 9 months ago - Pushed: over 2 years ago - Stars: 0 - Forks: 0
leosimoes/DataScienceAcademy-EngenhariaDeDados-Fundamentos
Atividades do curso "Fundamentos de Engenharia de Dados" da DataScienceAcademy.
Language: Python - Size: 631 KB - Last synced: 6 months ago - Pushed: 6 months ago - Stars: 0 - Forks: 1
fgabreu/Data-Pipeline---proj-05---Azure
Projeto Prático de uma Pipeline de dados do curso: Databricks e Data Factory: criando e orquestrando pipelines na nuvem da Alura
Language: Scala - Size: 17.6 KB - Last synced: 10 months ago - Pushed: 10 months ago - Stars: 0 - Forks: 0
Wellikiandre/Formacao-Engenheiro-de-Dados-Cloud-e-Big-Data-Azure-DataBricks-
Formação Engenheiro de Dados Cloud e Big Data (Azure & DataBricks)
Size: 10.6 MB - Last synced: 7 months ago - Pushed: 7 months ago - Stars: 6 - Forks: 2
andersonesanto/igti-edc-desafio-final
IGTI MBA Engenharida de dados - Bootcamp Engenheiro de Dados Cloud - Desafio final
Language: Python - Size: 58.6 KB - Last synced: 9 months ago - Pushed: about 2 years ago - Stars: 2 - Forks: 0
matheus-conrado/etl-antt-monitrip
Este projeto pretende extrair os dados de bilhete de passagem coletados pelo Sistema de Monitoramento do Transporte Rodoviário Interestadual e Internacional Coletivo de Passageiros
Language: Jupyter Notebook - Size: 50.8 KB - Last synced: 11 months ago - Pushed: 11 months ago - Stars: 0 - Forks: 0
matheus-conrado/ingestao-mercado-bitcoin
Este projeto tem como finalidade coletar os dados da API do Mercado Bitcoin.
Language: Python - Size: 27.3 KB - Last synced: 11 months ago - Pushed: 11 months ago - Stars: 0 - Forks: 0
matheus-conrado/de-sample-project
Repositório contendo um template de estrutura de código para desenvolvimento de pipeline de engenharia de dados
Size: 5.86 KB - Last synced: 11 months ago - Pushed: 11 months ago - Stars: 0 - Forks: 0
janascher/desafio-eng-de-dados-prouni
Desafio em grupo referente a trilha de estudos sobre Python da Alpha EdTech.
Language: Python - Size: 6.16 MB - Last synced: 11 months ago - Pushed: 11 months ago - Stars: 1 - Forks: 0
thiagoneye/course-data_engineering
Formação em Dados Encantech.
Language: Jupyter Notebook - Size: 21.4 MB - Last synced: about 1 year ago - Pushed: about 2 years ago - Stars: 0 - Forks: 0
Wellikiandre/Pandas-Performance-Studence
Analise de dados utilizando python, pandas, numpy e jupyter
Language: Jupyter Notebook - Size: 20.5 KB - Last synced: over 1 year ago - Pushed: about 2 years ago - Stars: 0 - Forks: 0
Wellikiandre/NAF_FTTH_BI_
Projeto de analise da rede dos clientes verificando o Status atual vs o Status anterior para melhoria continua.
Language: HTML - Size: 45.9 MB - Last synced: over 1 year ago - Pushed: about 2 years ago - Stars: 0 - Forks: 0
Wellikiandre/MercadoLivre_Wellikiandre
Desafio Mercado livre, engenharia de dados, analise de dados e automação com Python + SQL
Language: TSQL - Size: 9.23 MB - Last synced: over 1 year ago - Pushed: about 2 years ago - Stars: 0 - Forks: 1
AfonsoFeliciano/Imersao-Azure-Big-Data
Treinamento Azure Data Factory + Azure Databricks + Azure Analysis Services + Power BI
Language: Python - Size: 718 KB - Last synced: over 1 year ago - Pushed: over 2 years ago - Stars: 0 - Forks: 0