Job Summary
Key Responsibilities
- Design, build and maintain batch and real-time data pipelines.
- Develop data products using Databricks Lakeflow Declarative Pipelines, PySpark and SQL.
- Build streaming solutions using Spark Structured Streaming and Lakeflow declarative pipelines
- Optimise pipelines for scalability, reliability and performance.
- Develop automated tests and participate in code reviews.
- Contribute to CI/CD and engineering best practices.
- Monitor, troubleshoot and support production workloads.
- Use AI-assisted development tools to improve productivity while maintaining high engineering standards.
Essential Skills
- Databricks
- Lakeflow Declarative Pipelines and DXQ, DB Genie, MCP Server
- Apache Spark (PySpark)
- Spark Structured Streaming
- Auto Loader
- Unity Catalog
- Python
- SQL
- Delta Lake
- Azure Event Hubs or equivalent event streaming platforms
- Git and collaborative development workflows
- Unit testing
- CI/CD
- Strong analytical and problem-solving skills
Nice to Have
- Performance tuning and Spark optimisation
- Data modelling
- Azure DevOps
- AI coding assistants (GitHub Copilot, Cursor or similar)
- Experience working in Agile or SAFe environments
We're looking for an engineer who:
- Takes ownership from design through production support.
- Writes clean, maintainable and well-tested code.
- Builds reusable, production-ready solutions.
- Collaborates effectively with teammates and stakeholders.
- Continuously learns and embraces modern engineering practices.
Sobre a Cognizant
Cognizant (NASDAQ: CTSH) é uma construtora de IA e fornecedora de serviços de tecnologia, criando a ponte entre o investimento em IA e o valor para as empresas por meio do desenvolvimento de soluções de IA completas para nossos clientes. Nossa profunda experiência em setores, processos e engenharia nos permite incorporar o contexto único de cada organização em sistemas tecnológicos que potencializam a capacidade humana, geram resultados tangíveis e mantêm empresas globais à frente em um mundo em rápida transformação. Saiba mais em cognizant.ai ou @cognizant.
A Cognizant é uma empregadora que investe em equidade. Sua candidatura não será pautada em raça, cor, gênero, sexualidade, credo, origem, deficiência, gravidez ou qualquer outra característica protegida pelas leis brasileiras.
Informações adicionais de emprego
Os candidatos podem ser obrigados a comparecer a entrevistas presenciais ou por videoconferência. Além disso, os candidatos podem ser obrigados a apresentar seu documento de identificação emitido pelo estado ou governo atual durante cada entrevista.
Embora nosso sistema permita a candidatura em todos os idiomas, o(s) idioma(s) e o(s) nível(is) de proficiência exigidos para o trabalho variam. No entanto, é necessário um nível básico de inglês para fins de comunicação em toda a empresa.
A Cognizant é uma empregadora que investe em equidade. Sua candidatura não será pautada em raça, cor, gênero, sexualidade, credo, origem, deficiência, gravidez ou qualquer outra característica protegida pelas leis brasileiras.
Se você tem uma deficiência que requer adaptações razoáveis para procurar uma vaga de emprego ou enviar uma candidatura, envie um e-mail para [email protected] com sua solicitação e informações de contato.
