Senior Azure Solution Architect/Engineering Lead
Core Skills: Azure Databricks, PySpark, Spark, SQL, Azure Synapse, Kafka, Big Data, Python, Java, Azure Data Factory (ADF)
Professional Summary
Senior Data Architect with 15+ years of experience designing, building, and scaling enterprise-grade data platforms. Proven expertise in cloud-native big data architectures on Azure, real-time and batch data processing, and high-performance analytics systems. Strong background in data modeling, distributed computing, and end-to-end data pipeline orchestration, with hands-on leadership in large-scale enterprise and mission-critical projects.
Technical Expertise
Cloud & Data Platforms
- Azure Databricks (Lakehouse architecture, Delta Lake, Unity Catalog)
- Azure Synapse Analytics (Dedicated & Serverless Pools)
- Azure Data Factory (ADF) for ELT/ETL orchestration
- Azure Data Lake Storage Gen2
Big Data & Distributed Processing
- Apache Spark (Core, SQL, Structured Streaming)
- PySpark performance tuning & optimization
- Apache Kafka (real-time ingestion, streaming pipelines)
- Large-scale batch and streaming data architectures
Programming & Query Languages
- Python (advanced data engineering, automation, frameworks)
- Java (Spark internals, Kafka consumers/producers, microservices)
- SQL (complex analytics, query optimization, warehouse design)
Data Architecture & Design
- Lakehouse, Lambda, and Kappa architectures
- Dimensional modeling & data warehouse design
- Data governance, security, and lineage
- Scalability, fault tolerance, and cost optimization
· Technical depth in designing and building data platforms for high volume data processing with low latency
· Strong Expertise in Azure, Databricks, Python, Pyspark, SparkSQL, CI-CD (Jenkins, Github), Obs (Dynatrace),
· Good to have : Java, Kafka , Casandra, Microservices, API, Flink, ZeroMQ, Protocol Buffers
· Experience in recruiting , people leadership for managing team of 40+ , govern delivery and also act as technical mentor to set processes to bring innovation, goals to derive business outcomes
· Act as Module lead for India operations, liaise with NA teams to drive the objectives
Key Responsibilities & Achievements
- Architected and delivered enterprise-scale Azure Lakehouse platforms supporting petabyte-scale data.
- Designed real-time streaming solutions using Kafka and Spark Structured Streaming.
- Led migration of on-premise data warehouses to Azure Synapse + Databricks, improving performance and reducing cost.
- Built reusable PySpark frameworks for data ingestion, transformation, and validation.
- Optimized Spark jobs through partitioning, caching, and memory tuning to achieve significant runtime improvements.
- Implemented end-to-end ADF pipelines with CI/CD and parameter-driven orchestration.
- Mentored senior and junior engineers; provided architectural guidance across multiple teams.
- Collaborated with business stakeholders to translate analytics requirements into scalable technical designs.
Leadership & Soft Skills
- Technical leadership and architectural decision-making
- Cross-team collaboration and stakeholder communication
- Design reviews, code quality standards, and best practices
- Agile/Scrum execution in large enterprise environments
· Functional experience of capital markets, securities processing will be advantage
Sobre a Cognizant
Cognizant (NASDAQ: CTSH) é uma construtora de IA e fornecedora de serviços de tecnologia, criando a ponte entre o investimento em IA e o valor para as empresas por meio do desenvolvimento de soluções de IA completas para nossos clientes. Nossa profunda experiência em setores, processos e engenharia nos permite incorporar o contexto único de cada organização em sistemas tecnológicos que potencializam a capacidade humana, geram resultados tangíveis e mantêm empresas globais à frente em um mundo em rápida transformação. Saiba mais em cognizant.ai ou @cognizant.
A Cognizant é uma empregadora que investe em equidade. Sua candidatura não será pautada em raça, cor, gênero, sexualidade, credo, origem, deficiência, gravidez ou qualquer outra característica protegida pelas leis brasileiras.
Informações adicionais de emprego
Os candidatos podem ser obrigados a comparecer a entrevistas presenciais ou por videoconferência. Além disso, os candidatos podem ser obrigados a apresentar seu documento de identificação emitido pelo estado ou governo atual durante cada entrevista.
Embora nosso sistema permita a candidatura em todos os idiomas, o(s) idioma(s) e o(s) nível(is) de proficiência exigidos para o trabalho variam. No entanto, é necessário um nível básico de inglês para fins de comunicação em toda a empresa.
A Cognizant é uma empregadora que investe em equidade. Sua candidatura não será pautada em raça, cor, gênero, sexualidade, credo, origem, deficiência, gravidez ou qualquer outra característica protegida pelas leis brasileiras.
Se você tem uma deficiência que requer adaptações razoáveis para procurar uma vaga de emprego ou enviar uma candidatura, envie um e-mail para [email protected] com sua solicitação e informações de contato.
