[Job-30766] Sr Data Engineer, Brazil

Na CI&T , ajudamos grandes empresas a transformar o potencial da AI em impacto real nos negócios com AI Deployment, execução AI-native e tech-integrated business solutions.

Com 30 anos de experiência em transformação tecnológica, aceleramos inovação com expertise em agentic SDLC, application modernization, Data & AI, martech e business strategy. 

Somos 8.000 CI&Ters em mais de 25 países, colaborando para construir soluções com impacto real. AI já faz parte da forma como trabalhamos, evoluímos e inovamos todos os dias.

Importante: se você reside na Região Metropolitana de Campinas, sua presença nos escritórios da cidade será obrigatória, conforme a política de frequencia vigente.

Sobre o desafio

Estamos em um momento estratégico de evolução da nossa plataforma de dados, conduzindo a migração e modernização de um ambiente legado baseado em Azure/Databricks para uma nova arquitetura em Google Cloud Platform (GCP).

Você fará parte da construção de uma fundação de dados moderna, baseada em Data Mesh, arquitetura Medalhão (Raw / Silver / Gold) e fortes práticas de governança, habilitando novas capacidades de Analytics, Inteligência Artificial e processamento de dados em larga escala.

Principais responsabilidades

• Atuar na análise, refatoração e modernização de pipelines e notebooks legados em Spark/Databricks.

• Desenvolver e manter pipelines ELT/ETL utilizando BigQuery, Dataform e SQL para construção das camadas Silver e Gold.

• Implementar processos de ingestão batch e streaming com Dataflow (Apache Beam), Datastream e integração com plataformas de eventos como Kafka ou Event Hubs.

• Trabalhar com persistência de dados em BigLake e tabelas Iceberg, garantindo escalabilidade e governança.

• Automatizar provisionamento e deploys utilizando Terraform, Git e CI/CD (GitHub Actions).

• Implementar práticas de qualidade de dados, catalogação, linhagem e compartilhamento seguro de dados utilizando ferramentas de governança do ecossistema GCP.

• Colaborar com times multidisciplinares na definição de padrões de ingestão, processamento e arquitetura de dados.

Requisitos obrigatórios

• Experiência sólida em SQL avançado, preferencialmente em Google BigQuery.

• Vivência com Google Cloud Platform (GCP), especialmente BigQuery, Cloud Storage (GCS), Dataflow e Cloud Composer / Airflow.

• Experiência com Python e Apache Spark para processamento de dados em ambientes distribuídos.

• Conhecimento de Data Lakehouse, modelagem de dados, particionamento e formatos como Parquet, Avro e Iceberg.

• Experiência com Git, versionamento de código e pipelines de CI/CD.

• Capacidade de atuar em ambientes complexos, de alta volumetria e com múltiplos domínios de dados.

Diferenciais

• Experiência com Dataform ou dbt para transformação e orquestração de dados.

• Conhecimento em Terraform (Infraestrutura como Código).

• Familiaridade com Kafka, Event Hubs e processamento de streaming.

• Experiência prévia com Databricks e migração de workloads Spark.

• Conhecimentos em governança e segurança de dados no GCP (Dataplex, IAM, VPC Service Controls).

O que você vai encontrar

• Projetos de grande escala, com processamento de petabytes de dados e migração de milhares de objetos.

• Uso de tecnologias modernas do ecossistema Google Cloud, incluindo BigLake, Analytics Hub e recursos de IA para enriquecimento de dados.

• Ambiente altamente colaborativo, orientado a Data Mesh, com forte foco em engenharia de dados, automação, governança e inovação.

• Oportunidade de participar ativamente da construção de uma plataforma de dados de próxima geração, com impacto direto nas iniciativas de Analytics e IA da organização.

Se você gosta de desafios técnicos complexos, arquitetura de dados moderna e ambientes cloud de alta escala, queremos conhecer você!

 

 

#LI-LL1

\n\n

Nossos benefícios:

 

- Plano de saúde e odontológico;

- Vale alimentação e refeição;

- Auxílio-creche;

- Licença parental estendida;

- Parceria com academias e profissionais de saúde e bem-estar via Wellhub (Gympass)  TotalPass;

- Participação nos Lucros e Resultados (PLR);

- Seguro de Vida;

- Plataforma de aprendizagem contínua (CI&T University);

- Clube de descontos;

- Plataforma online gratuita dedicada à promoção da saúde física, mental e bem-estar;

- Curso gestante e parentalidade responsável;

- Parceria com plataformas de cursos online;

- Plataforma para aprendizagem de idiomas;

- E muitos outros

 

Mais detalhes sobre os nossos benefícios aqui: https://ciandt.com/br/pt-br/carreiras

 

Na CI&T, a inclusão começa no primeiro contato. Se você é pessoa com deficiência, é importante apresentar o seu laudo durante o processo seletivo. Consulte quais dados são necessários conter no laudo clicando aqui. Assim, podemos garantir o suporte e as adaptações que você merece. Se ainda não tem o laudo caracterizador, não se preocupe: podemos te apoiar para obtê-lo.

 

Temos um time dedicado de Saúde e Bem-estar, especialistas em inclusão e grupos de afinidade que estarão com você em todas as etapas. Conte com a gente para fazer essa jornada lado a lado.