Ecosyste.ms: Repos

An open API service providing repository metadata for many open source software ecosystems.

GitHub topics: engenharia-de-dados

matheussooares/make-data-netflix

Pipeline de Dados: usandoa linguagem python construir a técnica ETL (extrair, transformar e carregar).

Language: Python - Size: 95.7 KB - Last synced: 26 days ago - Pushed: 26 days ago - Stars: 1 - Forks: 0

olucaslopes/BNMP-Scraper

Navega pela API do Portal BNMP coletando dados

Language: Python - Size: 211 KB - Last synced: about 1 month ago - Pushed: 6 months ago - Stars: 5 - Forks: 3

ewertondrigues02/Engenharia-de-Dados

Varios Projetos de Engenharia de Dados usando principais ferramentas como: Airflow, Snowflake, dbt, Postrgres, Looker Studio, Power BI

Language: Python - Size: 215 KB - Last synced: 2 months ago - Pushed: 2 months ago - Stars: 0 - Forks: 0

dougdss89/elt_dimensao

Meu projeto de ETL

Language: TSQL - Size: 86.9 KB - Last synced: 4 months ago - Pushed: 4 months ago - Stars: 0 - Forks: 0

olwr/jornada_sc23

Minha jornada e anotações do Santander Coders 2023 2° Edição. Trilha Digital | Engenheiro de Dados

Size: 2.93 KB - Last synced: 7 months ago - Pushed: 7 months ago - Stars: 0 - Forks: 0

strangercacaus/bootcamp_eng_dados_how_2023

Compilado de projetos desenvolvidos durante o Bootcamp de Engenharia de Dados da How Bootcamps em 2023

Language: Python - Size: 48.2 MB - Last synced: 8 months ago - Pushed: 8 months ago - Stars: 0 - Forks: 0

kh4r00n/Engenharia-de-Dados-_Projeto-Final-Soul-Code-Academy

# Tema: Saúde ### Contexto O Projeto Final do Curso de Engenharia de Dados da SoulCode Academy consiste no ETL(Extract, Transform and Load) de 2 Datasets escolhidos pela equipe de acordo com o tema. Onde os dois arquivos devem ser tratados, modelados organizados com a utilização das tecnologias vistas ao longo do curso, Google Cloud Platform, Python, Pandas, PySpark, SparkSQL, Cloud Storage, Big Query e Data Studio. Além do processo de ETL foi feita a análise dos Dados para gerar insights a partir deles. ### Datasets Os Datasets foram escolhidos a partir do site [https://www.data.gov/](https://www.data.gov/), um site que armazenar dados abertos do Governo dos Estados Unidos. Os datasets selecionados foram os dados de Hospitalização por COVID-19 dos Condados de Connecticut em JSON e os dados de Vacinação dos Condados de Connecticut em CSV.

Language: Jupyter Notebook - Size: 9.76 MB - Last synced: 8 months ago - Pushed: over 2 years ago - Stars: 4 - Forks: 0

andersonesanto/igti-edd-m5-desafio

IGTI Enhenheiro de Dados - Módulo 5 Desafio Final

Language: Jupyter Notebook - Size: 38.1 KB - Last synced: 9 months ago - Pushed: over 2 years ago - Stars: 0 - Forks: 0

andersonesanto/igti-pa-repositorio-logs

IGTI MBA Engenharia de dados - Projeto Aplicado - Repositório de logs

Language: Dockerfile - Size: 13.7 KB - Last synced: 9 months ago - Pushed: over 1 year ago - Stars: 0 - Forks: 0

andersonesanto/edcdict

Dicionário de ferramentas para Engenharia de dados

Size: 31.3 KB - Last synced: 9 months ago - Pushed: almost 3 years ago - Stars: 2 - Forks: 0

andersonesanto/igti-ed-m4-pld-tp

IGTI MBA Engenheiro de dados - BootCamp Engenheiro de Dados - Módulo 4 - PLD Pipelines de Dados - Trabalho Prático

Language: Jupyter Notebook - Size: 6.84 KB - Last synced: 9 months ago - Pushed: over 2 years ago - Stars: 0 - Forks: 0

leosimoes/DataScienceAcademy-EngenhariaDeDados-Fundamentos

Atividades do curso "Fundamentos de Engenharia de Dados" da DataScienceAcademy.

Language: Python - Size: 631 KB - Last synced: 6 months ago - Pushed: 6 months ago - Stars: 0 - Forks: 1

fgabreu/Data-Pipeline---proj-05---Azure

Projeto Prático de uma Pipeline de dados do curso: Databricks e Data Factory: criando e orquestrando pipelines na nuvem da Alura

Language: Scala - Size: 17.6 KB - Last synced: 10 months ago - Pushed: 10 months ago - Stars: 0 - Forks: 0

Wellikiandre/Formacao-Engenheiro-de-Dados-Cloud-e-Big-Data-Azure-DataBricks-

Formação Engenheiro de Dados Cloud e Big Data (Azure & DataBricks)

Size: 10.6 MB - Last synced: 7 months ago - Pushed: 7 months ago - Stars: 6 - Forks: 2

andersonesanto/igti-edc-desafio-final

IGTI MBA Engenharida de dados - Bootcamp Engenheiro de Dados Cloud - Desafio final

Language: Python - Size: 58.6 KB - Last synced: 9 months ago - Pushed: about 2 years ago - Stars: 2 - Forks: 0

matheus-conrado/etl-antt-monitrip

Este projeto pretende extrair os dados de bilhete de passagem coletados pelo Sistema de Monitoramento do Transporte Rodoviário Interestadual e Internacional Coletivo de Passageiros

Language: Jupyter Notebook - Size: 50.8 KB - Last synced: 11 months ago - Pushed: 11 months ago - Stars: 0 - Forks: 0

matheus-conrado/ingestao-mercado-bitcoin

Este projeto tem como finalidade coletar os dados da API do Mercado Bitcoin.

Language: Python - Size: 27.3 KB - Last synced: 11 months ago - Pushed: 11 months ago - Stars: 0 - Forks: 0

matheus-conrado/de-sample-project

Repositório contendo um template de estrutura de código para desenvolvimento de pipeline de engenharia de dados

Size: 5.86 KB - Last synced: 11 months ago - Pushed: 11 months ago - Stars: 0 - Forks: 0

janascher/desafio-eng-de-dados-prouni

Desafio em grupo referente a trilha de estudos sobre Python da Alpha EdTech.

Language: Python - Size: 6.16 MB - Last synced: 11 months ago - Pushed: 11 months ago - Stars: 1 - Forks: 0

thiagoneye/course-data_engineering

Formação em Dados Encantech.

Language: Jupyter Notebook - Size: 21.4 MB - Last synced: about 1 year ago - Pushed: about 2 years ago - Stars: 0 - Forks: 0

Wellikiandre/Pandas-Performance-Studence

Analise de dados utilizando python, pandas, numpy e jupyter

Language: Jupyter Notebook - Size: 20.5 KB - Last synced: over 1 year ago - Pushed: about 2 years ago - Stars: 0 - Forks: 0

Wellikiandre/NAF_FTTH_BI_

Projeto de analise da rede dos clientes verificando o Status atual vs o Status anterior para melhoria continua.

Language: HTML - Size: 45.9 MB - Last synced: over 1 year ago - Pushed: about 2 years ago - Stars: 0 - Forks: 0

Wellikiandre/MercadoLivre_Wellikiandre

Desafio Mercado livre, engenharia de dados, analise de dados e automação com Python + SQL

Language: TSQL - Size: 9.23 MB - Last synced: over 1 year ago - Pushed: about 2 years ago - Stars: 0 - Forks: 1

AfonsoFeliciano/Imersao-Azure-Big-Data

Treinamento Azure Data Factory + Azure Databricks + Azure Analysis Services + Power BI

Language: Python - Size: 718 KB - Last synced: over 1 year ago - Pushed: over 2 years ago - Stars: 0 - Forks: 0