Engenheiro(a) de Dados Sênior (Databricks)
- Sao Paulo
- Product Management
- Permanent
- Hybrid
- Full Time
__jobinformationwidget.freetext.LocationText__
São Paulo, Brazil
Estamos em busca de um(a) Engenheiro(a) de Dados Sênior para atuar na construção e evolução da nossa plataforma de dados moderna, com foco em ingestão, processamento e disponibilização de dados em larga escala. O profissional será responsável por desenvolver pipelines robustos e escaláveis utilizando Databricks, contribuindo para a confiabilidade, governança e eficiência do ecossistema de dados da companhia.
Buscamos um perfil hands-on, com forte capacidade técnica, visão arquitetural e experiência em ambientes de dados corporativos de alta complexidade.
Principais responsabilidades:
- Desenvolver e manter pipelines de ingestão de dados batch e streaming utilizando Databricks.
- Projetar e implementar soluções de integração de dados provenientes de múltiplas fontes (APIs, bancos relacionais, arquivos, sistemas legados e SaaS).
- Construir e otimizar processos utilizando Apache Spark.
- Aplicar boas práticas de engenharia de dados, DataOps e observabilidade.
- Garantir qualidade, confiabilidade e performance dos pipelines.
- Atuar na modelagem e organização de dados em arquiteturas Lakehouse.
- Trabalhar em parceria com times de negócio, analytics, governança e plataforma.
- Apoiar a definição de padrões técnicos, frameworks reutilizáveis e melhores práticas de desenvolvimento.
- Conduzir troubleshooting e otimizações de performance em processos de dados críticos.
- Participar de iniciativas de modernização e evolução da plataforma de dados.
- Experiência sólida como Engenheiro(a) de Dados.
- Experiência comprovada com Databricks em ambientes produtivos.
- Experiência com Apache Spark (PySpark ou Scala).
- Experiência no desenvolvimento de pipelines de ingestão e transformação de dados.
- Vivência com soluções de Data Lake e Lakehouse.
- Experiência com Git e processos de CI/CD.
- Conhecimento em modelagem de dados analítica.
Conhecimentos técnicos:
- Python avançado.
- SQL avançado.
- Databricks Workflows.
- Delta Lake.
- Spark Structured Streaming.
- APIs REST.
- Arquiteturas modernas de dados.
- Otimização de performance em Spark.
- Controle e observabilidade de pipelines.
- Conceitos de governança e qualidade de dados.
Diferenciais:
- Certificações Databricks.
- Experiência com Unity Catalog.
- Vivência com Terraform e Infrastructure as Code.
- Conhecimento em Kafka ou Event Hubs.
- Experiência com monitoramento utilizando Datadog.
- Conhecimento em Airflow.
Competências comportamentais:
- Forte senso de ownership.
- Capacidade de atuar de forma autônoma e propositiva.
- Perfil colaborativo e focado em resolução de problemas.
- Boa comunicação com áreas técnicas e de negócio.
- Capacidade de influenciar decisões técnicas.
- Mentalidade de melhoria contínua.
- Visão sistêmica e foco em escalabilidade.
A Experian é uma empresa global de dados e tecnologia que impulsiona oportunidades para pessoas e empresas ao redor do mundo. Atuamos em diversos mercados, como serviços financeiros, saúde, automotivo, agronegócio, seguros, entre outros. A Experian investe em pessoas e em novas tecnologias avançadas para liberar o poder dos dados. Contamos com uma equipe incrível de 25.200 colaboradores em 32 países.
Nossa singularidade é valorizar a sua. A cultura da Experian, centrada nas pessoas, inclusiva e orientada por propósito, é reconhecida por diversos prêmios — incluindo World’s Best Workplaces™ 2025 (Top 25 global da Fortune) e Great Place To Work™ em 26 países, entre outros. Confira o Experian Life nas redes sociais ou explore nosso site de carreiras para entender o porquê. A Experian também se orgulha de ser uma empregadora que promove igualdade de oportunidades e ação afirmativa.
A Serasa Experian é muito mais do que você imagina. Com o propósito de criar um futuro melhor, ampliando oportunidades para pessoas e empresas, no Brasil somos mais de 4 mil pessoas que atuam em diversos times e especialidades. Aqui, cada conhecimento e diversidade se complementa e você pode trabalhar no que mais ama, estamos comprometidos a construir uma cultura inclusiva e um ambiente no qual pessoas possam equilibrar a carreira com seus compromissos e interesses pessoais, prezando pelo bem-estar.
A gente se dedica muito em ser uma das melhores e mais inovadoras empresas para se trabalhar do país, possibilitando experiências e carreiras incríveis para nossas pessoas. Nossa forte abordagem de pessoas em primeiro lugar é reconhecida externamente por meio de diversas certificações de mercado: fomos premiados pelo Great Place To Work™ em 24 países e pela certificação internacional Top Employers, além de sermos reconhecidos como uma das melhores empresas para jovens profissionais e contarmos com uma avaliação de 4,6 no Glassdoor. Cada reconhecimento nos indica que estamos no caminho certo, proporcionando um ambiente de trabalho cada vez melhor para nossos talentos.
Experian Careers - Creating a better tomorrow together
Find out what its like to work for Experian by clicking here
Vagas Tech
Prepare-se para explorar aqui na Serasa Experian uma jornada em tecnologia cheia de descoberta.
Saiba MaisRecommended Jobs
Salary
Location
São Paulo, Brazil
Experience Level
Not Applicable
Employment
Permanent
Location
Sao Paulo
Role Type
Hybrid
Schedule
Full Time
Department
Product Management
Brand
PagueVeloz
Remote working available
No
Description
Analista Pleno para atuar na frente de Infraestrutura de Pagamentos, apoiando a operação e evolução dos produtos de Pix, Boleto, DDA (Débito Direto Autorizado) e Open Finance. A pessoa dará suporte tá
Reference
c92a6cda-9c0c-4f3f-b766-049ef7aa77d1
Expiry Date
01/01/0001
Salary
Location
São Paulo, Brazil
Experience Level
Not Applicable
Employment
Permanent
Location
Sao Paulo
Role Type
Hybrid
Schedule
Full Time
Department
Product Management
Brand
PagueVeloz
Remote working available
No
Description
Especialista de Produtos I para atuar na frente de Infraestrutura de Pagamentos, com foco nos módulos de Pix, Boleto, DDA (Débito Direto Autorizado) e Open Finance. A pessoa será responsável por apoia
Reference
4d474616-b6a6-4c8f-a2d4-1d3a03e4cf2f
Expiry Date
01/01/0001
Salary
Location
São Carlos, Brazil
Experience Level
Not Applicable
Employment
Permanent
Location
Sao Carlo
Role Type
Hybrid
Schedule
Full Time
Department
Human Resources
Brand
Serasa Experian
Remote working available
No
Description
Missão do cargo Prestar atendimento aos colaboradores em temas relacionados a Departamento Pessoal/Recursos Humanos, garantindo orientações claras, cumprimento dos procedimentos internos e direcionam
Reference
5f6bf99a-f213-46cb-b64d-3f6924c62a33
Expiry Date
01/01/0001
Salary
Location
United States
Experience Level
Mid-Senior Level
Employment
Permanent
Location
United States
Role Type
Hybrid
Salary Range
$82,644 - $143,249
Schedule
Full Time
Department
Product Management
Brand
Experian
Remote working available
Yes
Description
As the world of work evolves, human capital management must keep pace. Employers have been seeking scalable, client-focused alternatives. In response, Experian has brought together the industry's lead
Reference
34424030-e4cf-4aac-9594-4f1fb19f46cf
Expiry Date
01/01/0001
Salary
Location
São Paulo, Brazil
Experience Level
Not Applicable
Employment
Permanent
Location
Sao Paulo
Role Type
Hybrid
Schedule
Full Time
Department
Technology
Brand
Serasa Experian
Remote working available
No
Description
Você será responsável pela concepção e evolução do produto em que estiver alocado. Pra isso, usará toda sua bagagem técnica e profissional indo além do design, mas sendo parte da descoberta e definiçõ
Reference
ec030fa6-1031-4462-b893-79acd2acd2e0
Expiry Date
01/01/0001
Salary
Location
united states
Experience Level
Not Applicable
Employment
Permanent
Location
United States
Role Type
Hybrid
Salary Range
$137,102 - $246,784
Schedule
Full Time
Department
Technology
Brand
Experian
Remote working available
No
Description
At Experian, we believe great work happens when people come together. We're focused on attracting talent in and around our designated hub locations who are open to collaborating with colleagues in per
Reference
7687dff5-e07d-432c-aaf7-3711981ae290
Expiry Date
01/01/0001
Salary
Location
São Paulo, Brazil
Experience Level
Not Applicable
Employment
Permanent
Location
Sao Paulo
Role Type
Hybrid
Schedule
Full Time
Department
Product Management
Brand
Serasa Experian
Remote working available
No
Description
Nós queremos revolucionar o acesso ao crédito no Brasil.Você será um membro fundamental da equipe de design, trabalhando junto com seus colegas em engenharia, analista de dados, product managers, parc
Reference
3bd57fa7-724a-4b97-a8bc-6e60638c81ab
Expiry Date
01/01/0001
Salary
Location
Mumbai, India
Experience Level
Not Applicable
Employment
Permanent
Location
Mumbai
Role Type
Hub
Schedule
Full Time
Department
Marketing and Communications
Brand
Experian
Remote working available
No
Description
Experian India helps lenders, fintechs and enterprises make better decisions through data, analytics, decisioning, fraud and identity solutions, and helps millions of Indians understand and improve th
Reference
d97d9edb-cebe-4b4f-a02f-07ed7d137b67
Expiry Date
01/01/0001
Salary
Location
Sofia, Bulgaria
Experience Level
Mid-Senior Level
Employment
Permanent
Location
Sofia
Role Type
Hybrid
Schedule
Full Time
Department
Human Resources
Brand
Experian
Remote working available
No
Description
The HR Transition Lead is responsible for planning, coordinating, and completing People Services transitions, including service model changes, HR technology implementations. Ensure a seamless shift fr
Reference
8009e9eb-6987-48f7-b888-786aec445d18
Expiry Date
01/01/0001
Salary
Location
Sofia, Bulgaria
Experience Level
Not Applicable
Employment
Permanent
Location
Sofia
Role Type
Hybrid
Schedule
Full Time
Department
Technology
Brand
Experian
Remote working available
No
Description
As DevOps Engineer within Managed Services team you will be responsible for delivering, maintaining, and continuously improving the cloud-based solutions and technical environments supporting Experian
Reference
a69434f3-6cc7-4cf1-9cd3-1a06408ec138
Expiry Date
01/01/0001
Salary
Location
Nottingham, England
Experience Level
Not Applicable
Employment
Permanent
Location
Nottingham
Role Type
Hybrid
Schedule
Full Time
Department
Product Management
Brand
Experian
Remote working available
No
Description
We are looking for a Product Manager to own our Open Banking products and our transaction categorisation engine in the UK business. These capabilities sit at the heart of how our clients assess afford
Reference
dda09bdf-7589-47c9-ad67-7d4e10f8ef0f
Expiry Date
01/01/0001
Salary
Location
Hyderabad, India
Experience Level
Not Applicable
Employment
Permanent
Location
Hyderabad
Role Type
Hybrid
Schedule
Full Time
Department
Product Development
Brand
Experian
Remote working available
No
Description
Responsibilities:Component Development & Library OwnershipPartner with UX designers to bring design concepts to life through reusable, responsive components.Gather requirements and feedback from Produ
Reference
639368bd-a0e3-4ff7-82c2-342aeeb21940
Expiry Date
01/01/0001
Salary
Location
London, England
Experience Level
Not Applicable
Employment
Permanent
Location
London
Role Type
Hybrid
Schedule
Full Time
Department
Finance
Brand
Experian
Remote working available
No
Description
Why this role is important to usWe're on a journey to strengthen and standardise our global Internal Controls over Financial Reporting (ICFR) framework, evolving towards leading-practice SOX standards
Reference
b045a31a-f77d-483e-b39b-24b8766089a7
Expiry Date
01/01/0001
Salary
Location
London, England
Experience Level
Not Applicable
Employment
Permanent
Location
London
Role Type
Hybrid
Schedule
Full Time
Department
Marketing and Communications
Brand
Experian
Remote working available
No
Description
We're looking for a Senior Product Marketing Manager, with experience working within a consumer facing organisation, to own the strategy behind some of our most important innovative consumer propositi
Reference
4d185255-4321-477c-b22a-323198f1d62f
Expiry Date
01/01/0001
Salary
Location
Kuala Lumpur, Malaysia
Experience Level
Mid-Senior Level
Employment
Permanent
Location
Kuala Lumpur
Role Type
Hybrid
Schedule
Full Time
Department
Legal & Compliance
Brand
Experian
Remote working available
No
Description
The Senior Compliance Assurance Officer plays a key role in delivering effective, risk-based compliance assurance across the EMAP region. This role is suited to someone who can combine strong hands-on
Reference
eb93a6f5-0d02-4804-93ea-0c862ee55563
Expiry Date
01/01/0001
Salary
Location
Costa Mesa, United States
Experience Level
Not Applicable
Employment
Permanent
Location
Costa Mesa
Role Type
Home
Salary Range
$73,789 - $127,901
Schedule
Full Time
Department
Marketing and Communications
Brand
Experian
Remote working available
No
Description
At Experian, we believe great work happens when people come together. We're focused on attracting talent in and around our designated hub locations who are open to collaborating with colleagues in per
Reference
e776e765-e7fa-4518-b5c0-5c8a6d83bd7d
Expiry Date
01/01/0001