Analista de Engenharia de Dados Sênior (Databricks)
- Sao Paulo
- Product Management
- Permanent
- Hybrid
- Full Time
__jobinformationwidget.freetext.LocationText__
São Paulo, Brazil
Estamos em busca de um(a) Analista de Dados Sênior para atuar na construção e evolução da nossa plataforma de dados moderna, com foco em ingestão, processamento e disponibilização de dados em larga escala. O profissional será responsável por desenvolver pipelines robustos e escaláveis utilizando Databricks, contribuindo para a confiabilidade, governança e eficiência do ecossistema de dados da companhia.
Buscamos um perfil hands-on, com forte capacidade técnica, visão arquitetural e experiência em ambientes de dados corporativos de alta complexidade.
Principais responsabilidades:
- Desenvolver e manter pipelines de ingestão de dados batch e streaming utilizando Databricks.
- Projetar e implementar soluções de integração de dados provenientes de múltiplas fontes (APIs, bancos relacionais, arquivos, sistemas legados e SaaS).
- Construir e otimizar processos utilizando Apache Spark.
- Aplicar boas práticas de engenharia de dados, DataOps e observabilidade.
- Garantir qualidade, confiabilidade e performance dos pipelines.
- Atuar na modelagem e organização de dados em arquiteturas Lakehouse.
- Trabalhar em parceria com times de negócio, analytics, governança e plataforma.
- Apoiar a definição de padrões técnicos, frameworks reutilizáveis e melhores práticas de desenvolvimento.
- Conduzir troubleshooting e otimizações de performance em processos de dados críticos.
- Participar de iniciativas de modernização e evolução da plataforma de dados.
- Experiência comprovada com Databricks em ambientes produtivos.
- Experiência com Apache Spark (PySpark ou Scala).
- Experiência no desenvolvimento de pipelines de ingestão e transformação de dados.
- Vivência com soluções de Data Lake e Lakehouse.
- Experiência com Git e processos de CI/CD.
- Conhecimento em modelagem de dados analítica.
Conhecimentos técnicos:
- Python avançado.
- SQL avançado.
- Databricks Workflows.
- Delta Lake.
- Spark Structured Streaming.
- APIs REST.
- Arquiteturas modernas de dados.
- Otimização de performance em Spark.
- Controle e observabilidade de pipelines.
- Conceitos de governança e qualidade de dados.
Diferenciais:
- Certificações Databricks.
- Experiência com Unity Catalog.
- Vivência com Terraform e Infrastructure as Code.
- Conhecimento em Kafka ou Event Hubs.
- Experiência com monitoramento utilizando Datadog.
- Conhecimento em Airflow.
Competências comportamentais:
- Forte senso de ownership.
- Capacidade de atuar de forma autônoma e propositiva.
- Perfil colaborativo e focado em resolução de problemas.
- Boa comunicação com áreas técnicas e de negócio.
- Capacidade de influenciar decisões técnicas.
- Mentalidade de melhoria contínua.
- Visão sistêmica e foco em escalabilidade.
A Experian é uma empresa global de dados e tecnologia que impulsiona oportunidades para pessoas e empresas ao redor do mundo. Atuamos em diversos mercados, como serviços financeiros, saúde, automotivo, agronegócio, seguros, entre outros. A Experian investe em pessoas e em novas tecnologias avançadas para liberar o poder dos dados. Contamos com uma equipe incrível de 25.200 colaboradores em 32 países.
Nossa singularidade é valorizar a sua. A cultura da Experian, centrada nas pessoas, inclusiva e orientada por propósito, é reconhecida por diversos prêmios — incluindo World’s Best Workplaces™ 2025 (Top 25 global da Fortune) e Great Place To Work™ em 26 países, entre outros. Confira o Experian Life nas redes sociais ou explore nosso site de carreiras para entender o porquê. A Experian também se orgulha de ser uma empregadora que promove igualdade de oportunidades e ação afirmativa.
A Serasa Experian é muito mais do que você imagina. Com o propósito de criar um futuro melhor, ampliando oportunidades para pessoas e empresas, no Brasil somos mais de 4 mil pessoas que atuam em diversos times e especialidades. Aqui, cada conhecimento e diversidade se complementa e você pode trabalhar no que mais ama, estamos comprometidos a construir uma cultura inclusiva e um ambiente no qual pessoas possam equilibrar a carreira com seus compromissos e interesses pessoais, prezando pelo bem-estar.
A gente se dedica muito em ser uma das melhores e mais inovadoras empresas para se trabalhar do país, possibilitando experiências e carreiras incríveis para nossas pessoas. Nossa forte abordagem de pessoas em primeiro lugar é reconhecida externamente por meio de diversas certificações de mercado: fomos premiados pelo Great Place To Work™ em 24 países e pela certificação internacional Top Employers, além de sermos reconhecidos como uma das melhores empresas para jovens profissionais e contarmos com uma avaliação de 4,6 no Glassdoor. Cada reconhecimento nos indica que estamos no caminho certo, proporcionando um ambiente de trabalho cada vez melhor para nossos talentos.
Experian Careers - Creating a better tomorrow together
Find out what its like to work for Experian by clicking here
Vagas Tech
Prepare-se para explorar aqui na Serasa Experian uma jornada em tecnologia cheia de descoberta.
Saiba MaisRecommended Jobs
Salary
Location
São Paulo, Brazil
Experience Level
Not Applicable
Employment
Permanent
Location
Sao Paulo
Role Type
Hybrid
Schedule
Full Time
Department
Legal & Compliance
Brand
Serasa Experian
Remote working available
No
Description
· Apoiar a execução e o monitoramento do framework de Governança de TI.· Garantir a aderência às políticas, normas e procedimentos internos relacionados à tecnologia.· Realizar avali
Reference
58415d51-ec09-40ce-add5-f85271c424f8
Expiry Date
01/01/0001
Salary
Location
Sofia, Bulgaria
Experience Level
Not Applicable
Employment
Permanent
Location
Sofia
Role Type
Hybrid
Schedule
Full Time
Department
Technology
Brand
Experian
Remote working available
No
Description
The Cloud SRE would meaningfully contribute to project delivery with hands on experience in managing enterprise cloud platform. You will work closely to design and build automated operational processe
Reference
9e9855a6-2b8b-4daa-8222-a359090e1b40
Expiry Date
01/01/0001
Salary
Location
Kuala Lumpur, Malaysia
Experience Level
Not Applicable
Employment
Permanent
Location
Kuala Lumpur
Role Type
Hybrid
Schedule
Full Time
Department
Sales & Business Development
Brand
Experian
Remote working available
No
Description
Job description Role Overview What you’ll need to bring to the teamTo canvass for new accounts in the financial institution government sector and corporate market segment. Continue to appraise key bus
Reference
55d49f21-c006-440e-999c-c972a4831fcb
Expiry Date
01/01/0001
Salary
Location
Hyderabad, India
Experience Level
Not Applicable
Employment
Permanent
Location
Hyderabad
Role Type
Hybrid
Schedule
Full Time
Department
Technology
Brand
Experian
Remote working available
No
Description
At Experian, we use data, technology, and innovation to create opportunities for people and businesses around the world. We are seeking a highly experienced Solution Architect to lead the design and m
Reference
cb0959ae-730d-4b67-8a87-32f9106cc4f7
Expiry Date
01/01/0001
Salary
Location
São Paulo, Brazil
Experience Level
Not Applicable
Employment
Permanent
Location
Sao Paulo
Role Type
Roam
Schedule
Full Time
Department
Sales & Business Development
Brand
Serasa Experian
Remote working available
No
Description
Descrição do cargoAtuação como consultor técnico-comercial de nossos clientes, exercendo papel de Sales Engineer no processo de vendas. O profissional será responsável por diagnosticar dores de negóci
Reference
0a08d107-9f17-44fa-8639-129c5def3ab9
Expiry Date
01/01/0001
Salary
Location
United States
Experience Level
Associate
Employment
Permanent
Location
United States
Role Type
Hybrid
Salary Range
See Pay Range
Schedule
Full Time
Department
Sales & Business Development
Pay Range
$80,000 - $130,000
Brand
Experian
Remote working available
Yes
Description
We are looking for an Account Executive to join our Preferred Commercial Banking vertical in the Southeast Region. Existing clients within the territory may have bi-coastal operations. You will exceed
Reference
095cf0b7-ced0-4aa9-9018-d7152b03dc9b
Expiry Date
01/01/0001
Salary
Location
Washington, United States
Experience Level
Associate
Employment
Permanent
Location
Washington
Role Type
Hybrid
Salary Range
See Pay Range
Schedule
Full Time
Department
Sales & Business Development
Pay Range
$80,000 - $130,000
Brand
Experian
Remote working available
No
Description
The Client Executive will have the responsibility in a named account environment generating revenue growth and managing Credit Union client relationships. You will develop close alliances with senior
Reference
16218e58-c738-4325-8b85-eabd8956a69c
Expiry Date
01/01/0001
Salary
Location
Franklin, United States
Experience Level
Not Applicable
Employment
Permanent
Location
Franklin
Role Type
Hybrid
Salary Range
$92,562 - $160,440
Schedule
Full Time
Department
Sales & Business Development
Brand
Experian
Remote working available
No
Description
Build partnerships that power our growth.We're looking for a Carrier Relations Lead to grow and improve the relationships that sit at the heart of our agency's success. If you value turning partnershi
Reference
94c7ab4b-bf9f-4cad-8530-f96c834cf874
Expiry Date
01/01/0001
Salary
Location
São Paulo, Brazil
Experience Level
Not Applicable
Employment
Permanent
Location
Sao Paulo
Role Type
Hybrid
Schedule
Full Time
Department
Technology
Brand
Serasa Experian
Remote working available
Yes
Description
Buscamos uma pessoa Staff AI Engineer para liderar a estratégia de uso e adoção de Inteligência Artificial nos produtos de Marketing Services, conectando profundidade técnica em GenAI com oportunidade
Reference
df9a8eab-f39f-4f80-bb4e-58934d5b230e
Expiry Date
01/01/0001
Salary
Location
United States
Experience Level
Director
Employment
Permanent
Location
United States
Role Type
Hybrid
Salary Range
$137,102 - $246,784
Schedule
Full Time
Department
Technology
Brand
Experian
Remote working available
No
Description
You will lead the integration of artificial intelligence into our software platforms, which serve both business clients and their end customers. You'll manage engineering teams across three countries,
Reference
b99fd369-7bee-48a3-acbf-9674409abe50
Expiry Date
01/01/0001
Salary
Location
São Paulo, Brazil
Experience Level
Not Applicable
Employment
Permanent
Location
Sao Paulo
Role Type
Hybrid
Schedule
Full Time
Department
Technology
Brand
Serasa Experian
Remote working available
No
Description
Descrição do trabalho Job DescriptionLiderar e desenvolver o time por meio de 1:1s, feedbacks, avaliação de performance e planos de desenvolvimento;Identificar oportunidades e gaps de performance, con
Reference
ca23a095-b290-49d4-b46f-a4d0b7b1989c
Expiry Date
01/01/0001
Salary
Location
London, England
Experience Level
Not Applicable
Employment
Permanent
Location
London
Role Type
Hybrid
Schedule
Full Time
Department
Data Management
Brand
Experian
Remote working available
No
Description
The Head of Enablement & Innovation ensures that innovations for the EDQ UK business are identified, evaluated and executed to completion within defined measures. Reporting into our Director of Soluti
Reference
86174cfe-e81c-4110-bd78-fd436faffdc1
Expiry Date
01/01/0001
Salary
Location
São Paulo, Brazil
Experience Level
Not Applicable
Employment
Permanent
Location
Sao Paulo
Role Type
Home
Schedule
Full Time
Department
Technology
Brand
Serasa Experian
Remote working available
Yes
Description
Atua no desenvolvimento e evolução dos componentes web do SDK unificado, garantindo a captura, validação e transmissão segura de dados provenientes de diferentes fontes, como imagens, documentos e sen
Reference
bba93df6-e891-466c-8093-1adb37f2c0a8
Expiry Date
01/01/0001
Salary
Location
Sofia, Bulgaria
Experience Level
Not Applicable
Employment
Permanent
Location
Sofia
Role Type
Hybrid
Schedule
Full Time
Department
Analytics
Brand
Experian
Remote working available
No
Description
This is a 2-year fixed-term role.As Associate Machine Learning Scientist you will work on advanced research and development, to enhance relationships with clients, acquire strategic datasets and provi
Reference
5205a195-c200-4bd4-8249-6443a7f8450b
Expiry Date
01/01/0001
Salary
Location
São Paulo, Brazil
Experience Level
Not Applicable
Employment
Permanent
Location
Sao Paulo
Role Type
Home
Schedule
Full Time
Department
Product Development
Brand
Serasa Experian
Remote working available
No
Description
Criação e manutenção de projetos de automação de testes de API com foco em performance, resiliência e observabilidade da qualidade. Execução de testes manuais em APIs, serviços e aplicações distrib
Reference
bc57a701-11c2-4886-a71f-d759a60f77fa
Expiry Date
01/01/0001
Salary
Location
Cyberjaya, Malaysia
Experience Level
Mid-Senior Level
Employment
Contract
Location
Cyberjaya
Role Type
Hybrid
Schedule
Full Time
Department
Product Development
Brand
Experian
Remote working available
No
Description
What You’ll DoExperian is a technology-driven organization focused on delivering innovative digital solutions. We are passionate about building high-quality products that positively impact users while
Reference
8d2be178-1ad1-44bc-8364-62edb76c1f0d
Expiry Date
01/01/0001