Autor(es):
Bordin, André
Data: 2025
Identificador Persistente: http://hdl.handle.net/10314/10194
Origem: Repositório Científico da Universidade Politécnica da Guarda
Assunto(s): gestão e manutenção da plataforma de dados; datasets; Dremio; Terraform; Apache AirFlow
Descrição
O presente relatório detalha algumas das atividades realizadas ao longo das 760 horas de estágio, abordando as diferentes fases e desafios enfrentados durante o período. Desde os primeiros passos, que envolveram a participação em reuniões de alinhamento do projeto e integração com a equipe, até a atuação prática no dia-a-dia da gestão e manutenção da plataforma de dados, o documento explora uma série de conceitos e tecnologias. São descritos os principais componentes do ecossistema da plataforma, com foco nas tecnologias utilizadas, como Dremio, Terraform, AWS IAM, Apache AirFlow, entre outras ferramentas essenciais. Adicionalmente, o relatório destaca casos práticos de atuação ponta-a-ponta, como o gerenciamento de acessos, descomissionamento de datasets (tabela de uma base de dados) e a materialização de datasets virtuais (views), ilustrando a aplicação de conceitos técnicos em situações reais. Os desafios e as soluções são apresentados em detalhes com exemplos de atuações em um formato passo-a-passo, oferecendo uma visão sobre o trabalho de um engenheiro de dados júnior em uma plataforma complexa.