About this role
Company Description
Experian is a global data and technology company, powering opportunities for people and businesses around the world. We help to redefine lending practices, uncover and prevent fraud, simplify healthcare, create marketing solutions, and gain deeper insights into the automotive market, all using our unique combination of data, analytics and software. We also assist millions of people to realize their financial goals and help them save time and money.
We operate across a range of markets, from financial services to healthcare, automotive, agribusiness, insurance, and many more industry segments.
We invest in people and new advanced technologies to unlock the power of data. As a FTSE 100 Index company listed on the London Stock Exchange (EXPN), we have a team of 22,500 people across 32 countries. Our corporate headquarters are in Dublin, Ireland. Learn more at experianplc.com.
Job Description
Estamos reestruturando os motores de priorização dos dados de contato, modernizando os processos existentes e migrando para uma nova arquitetura baseada em PySpark. O profissional atuará diretamente na evolução dos pipelines de dados, suportando a transformação de processos legados para uma solução mais escalável e resiliente em nuvem.
Responsabilidades Principais
- Desenvolver e manter pipelines de dados escaláveis e eficientes em PySpark;
- Migrar e modernizar processos legados para novos modelos de processamento distribuído;
- Implementar soluções de processamento de dados em ambiente AWS;
- Colaborar com times de produto e analistas do Data Office para detalhar necessidades e regras de negócio;
- Otimizar arquiteturas de dados considerando performance, governança e custo;
- Participar de iniciativas de automação, observabilidade e melhoria contínua dos processos.
Qualifications
Requisitos Técnicos
- Experiência sólida com PySpark e frameworks de processamento distribuído;
- Conhecimento em Apache Airflow, Spark e Hadoop (quando aplicável);
- Proficiência em linguagens de programação, preferencialmente Python;
- Experiência com serviços AWS relevantes (ex.: EMR, Lambda, DynamoDB, S3, Glue opcional);
- Conhecimento em bancos de dados SQL;
- Familiaridade com práticas de DevOps e pipelines de CI/CD.
Habilidades Comportamentais
- Capacidade de lidar com problemas complexos e entender regras de negócio;
- Senso crítico e foco em eficiência;
- Gosto por otimização e melhoria contínua;
- Comunicação clara e colaboração efetiva com diferentes áreas;
- Mentalidade orientada a resultados;
- Aprendizado rápido e adaptabilidade a mudanças tecnológicas.
Diferenciais
- Experiência com provisionamento de infraestrutura (IaC);
- Vivência com metodologias ágeis;
- Experiência prévia em migração de processos legados para arquiteturas distribuídas.
Additional Information
Our uniqueness is that we celebrate yours. Experian's culture and people are important differentiators. We take our people agenda very seriously and focus on what matters; DEI, work/life balance, development, authenticity, collaboration, wellness, reward & recognition, volunteering... the list goes on. Experian's people first approach is award-winning; World's Best Workplaces™ 2024 (Fortune Top 25), Great Place To Work™ in 24 countries, and Glassdoor Best Places to Work 2024 to name a few. Check out Experian Life on social or our Careers Site to understand why.
Experian is proud to be an Equal Opportunity and Affirmative Action employer. Innovation is an important part of Experian's DNA and practices, and our diverse workforce drives our success. Everyone can succeed at Experian and bring their whole self to work, irrespective of their gender, ethnicity, religion, colour, sexuality, physical ability or age. If you have a disability or special need that requires accommodation, please let us know at the earliest opportunity.
Experian Careers - Creating a better tomorrow together
Find out what its like to work for Experian by clicking here
Other facts
About Experian
Somos uma Datatech, líder global em soluções de inteligência para análise de riscos e oportunidades com foco nas jornadas de crédito, autenticação e prevenção à fraude.
Temos presença global com expertise local, estamos em 30 países e atuamos há 55 anos no mercado brasileiro.
Contamos com os melhores talentos, mais de 21 mil colaboradores no mundo e quase 5 mil no Brasil.
Trabalhamos sempre para criar um ambiente diverso e equilibrado para todas as nossas pessoas. Por isso, temos tanto orgulho de estarmos sendo continuamente reconhecidos como uma das melhores empresas para se trabalhar pelo Great Place to Work, Linkedin e Employers for Youth.
E não para por aí. Aqui, inovação é o nosso combustível e não é à toa que a gente sabe quem é quem. Temos o maior ecossistema de big data da América Latina e a ele somamos tecnologia de ponta para revelar o que nem todos conseguem ver e ir além do óbvio.
Com um portfólio completo e flexível, enxergamos o todo e à frente. Antecipamos o futuro para oferecer a pessoas e empresas um caminho que transforme, hoje, a incerteza do risco na melhor decisão.
É assim que ajudamos pessoas a realizarem seus sonhos e empresas a prosperarem. Que trabalhamos por um Brasil com mais inclusão financeira. Afinal, trabalhar na Serasa Experian é muito mais do que as pessoas imaginam. É criar um amanhã melhor para todos, ampliando oportunidades aqui e agora.
What you'll do
- The role involves developing and maintaining scalable data pipelines in PySpark and migrating legacy processes to a new cloud-based architecture. The professional will also collaborate with product teams and analysts to optimize data architectures for performance and cost.
Ready to join Experian?
Take the next step in your career journey