Rafael Reinaldo Marcolino
About Candidate
Engenheiro de Dados com especialização em Python e Pyspark e ampla
experiência em ambientes de nuvem e on-premises. Possuo expertise em projetos
de engenharia de dados, construção e manutenção de pipelines, e gerenciamento
de plataformas como Azure, Hadoop, Control-M e DMPS. Com um sólido histórico
em ETL (Extração, Transformação e Carregamento), sou hábil em transformar
dados brutos em tabelas úteis para as áreas de negócios, sempre com foco na
otimização da performance e na eficiência de custos em ambientes de cloud.
Education
Curso voltado para area de tecnologia em geral, ensinado noção de programação aplicado em varias linguagens, e tambem area dados.
Experiences
Responsável pela ingestão de dados em camadas Bronze e Silver na cloud, sempre visando a melhoria de performance e a redução de custos. Utilizo SQL, PySpark e Python, bem como Databricks e Kedro. Também realizo a implantação e manutenção de ambientes on-premises, empregando ferramentas como Hadoop, Control-M e DMPS. Conduzo Code Reviews e soluciono incidentes em produção. Além disso, colaboro na criação de projetos com base nos modelos gerados pela área de ciência de dados e interajo com a área de negócios para definir políticas e regras para a construção de novas tabelas.
Desenvolvimento e implementação de pipelines de dados robustos no Azure, aproveitando as capacidades do Data Factory e Databricks para ingestão e transformação de dados. Utilização de ferramentas e linguagens como Python, PySpark e SQL, ingestando grandes volumes de dados de diversas fontes. Transformar e processar dados de forma eficiente para suportar análises avançadas. Garantir a integridade e qualidade dos dados através de pipelines escaláveis.