O Engenheiro de Dados será responsável pelo desenvolvimento, implementação e otimização de pipelines de dados, garantindo a ingestão, transformação e disponibilização eficiente de informações para suportar análises avançadas e processos de negócio. Atuará com dbt, AWS (Redshift) e Azure para modelagem e para criação de fluxos ELT, utilizará Databricks, para processamento distribuído e escalável de grandes volumes de dados.

Responsabilidades:

• Desenvolver e manter pipelines de dados utilizando dbt e Databricks.
• Criar e otimizar processos ETL para garantir a eficiência e qualidade dos dados.
• Implementar soluções de processamento distribuído com Apache Spark no ambiente Databricks.
• Integrar e transformar dados provenientes de múltiplas fontes (bancos relacionais, APIs, Data Lakes, etc.).
• Projetar e implementar modelos de dados para atender às necessidades de análise e reporting.
• Garantir a governança, segurança e conformidade dos dados dentro dos padrões organizacionais.
• Trabalhar em colaboração com analistas de dados, cientistas de dados e equipes de negócios para fornecer soluções escaláveis.
• Automatizar processos de ingestão e transformação de dados, reduzindo esforços operacionais.
• Monitorar e otimizar a performance dos pipelines de dados, garantindo alta disponibilidade e confiabilidade.

Requisitos:

• Experiência com dbt e outras soluções semelhantes para criação e transformação de dados.
• Conhecimento avançado em Databricks e Apache Spark para processamento de dados em larga escala.
• Experiência com bancos de dados SQL e NoSQL (SQL Server, Oracle, PostgreSQL, Snowflake, MongoDB, etc.).
• Familiaridade com arquiteturas de Data Lake e Data Warehouse.
• Conhecimento em linguagens de programação como Python e Scala.
• Experiência com serviços de nuvem (Azure, AWS, GCP) para armazenamento e processamento de dados.
• Habilidade em ferramentas de orquestração de workflows, como Apache Airflow ou Azure Data Factory.
• Experiência com versionamento de código e práticas DevOps (Git, CI/CD, Docker, Terraform).
• Boa capacidade de análise e resolução de problemas de performance em pipelines de dados e FinOps.

Modelo de contratação

• Contrato PJ.
• Modelo híbrido, com necessidade de presença no escritório do cliente.

Benefícios:

• Treinamentos e cursos em tecnologias de dados de mercado.
• Auxílio com certificações (100% de reembolso).
• Trilhas de conhecimento em tecnologias de dados e cloud.
• Parcerias com instituições de ensino para pós-graduação.
• TotalPass.
• Salário negociável e compatível com o mercado.

Nós somos a ATRA

A ATRA é especialista em Dados e é parceira oficial das maiores empresas de tecnologia: Google, Denodo, Databricks, Informatica, Microsoft e AWS. Somos certificados como uma das melhores empresas para trabalhar no Brasil. Ajudamos empresas a inovarem e transformarem seus dados em ativos estratégicos.

Somos apaixonados por dados! Se interessou?

Envie seu Currículo e faça parte do nosso time de profissionais!