Job Title: - Azure Databricks with Pyspark
Location: - AIA Kolkata
Experience: - 6 to 9 Years
An Azure Databricks Developer job description typically requires expertise in PySpark, Azure Data Factory (ADF), and Delta Lake architecture
Key Responsibilities
· Pipeline Development: Build and optimize scalable data pipelines and ETL processes using Azure Databricks and PySpark.
· Data Integration: Connect and manage data from Azure Data Lake Storage (ADLS Gen2) and various file formats (Parquet, Delta, JSON, CSV).
· Performance Tuning: Tune Spark SQL queries, optimize cluster configurations, and manage data partitioning strategies.
· CI/CD & Deployment: Implement version control via Git and deploy automated workflows using Azure DevOps or GitHub Actions.
Required Qualifications
· Experience: 4 to 8+ years of total IT experience, with at least 2–3 years of hands-on production experience in Azure Databricks.
· Tech Stack: Advanced proficiency in Python, PySpark, and complex SQL.
· Cloud Knowledge: Strong familiarity with core Azure services including ADF, ADLS Gen2, and Azure SQL.
Sobre a Cognizant
Cognizant (NASDAQ: CTSH) é uma construtora de IA e fornecedora de serviços de tecnologia, criando a ponte entre o investimento em IA e o valor para as empresas por meio do desenvolvimento de soluções de IA completas para nossos clientes. Nossa profunda experiência em setores, processos e engenharia nos permite incorporar o contexto único de cada organização em sistemas tecnológicos que potencializam a capacidade humana, geram resultados tangíveis e mantêm empresas globais à frente em um mundo em rápida transformação. Saiba mais em cognizant.ai ou @cognizant.
A Cognizant é uma empregadora que investe em equidade. Sua candidatura não será pautada em raça, cor, gênero, sexualidade, credo, origem, deficiência, gravidez ou qualquer outra característica protegida pelas leis brasileiras.
Informações adicionais de emprego
Os candidatos podem ser obrigados a comparecer a entrevistas presenciais ou por videoconferência. Além disso, os candidatos podem ser obrigados a apresentar seu documento de identificação emitido pelo estado ou governo atual durante cada entrevista.
Embora nosso sistema permita a candidatura em todos os idiomas, o(s) idioma(s) e o(s) nível(is) de proficiência exigidos para o trabalho variam. No entanto, é necessário um nível básico de inglês para fins de comunicação em toda a empresa.
A Cognizant é uma empregadora que investe em equidade. Sua candidatura não será pautada em raça, cor, gênero, sexualidade, credo, origem, deficiência, gravidez ou qualquer outra característica protegida pelas leis brasileiras.
Se você tem uma deficiência que requer adaptações razoáveis para procurar uma vaga de emprego ou enviar uma candidatura, envie um e-mail para [email protected] com sua solicitação e informações de contato.
