Skill: Python, Pyspark, AWS
Exp: 6 to 12 years
Location: Pune
Job Summary
We are seeking a skilled Python + PySpark + AWS Developer to design, develop, and maintain scalable data engineering solutions. The role involves building high-performance ETL pipelines, processing large datasets, and integrating with AWS cloud services to support enterprise analytics and reporting needs.
Key Responsibilities
- Design, develop, and optimize ETL pipelines using PySpark and Python.
- Work with large-scale datasets to perform data cleansing, transformation, and aggregation.
- Integrate with AWS services such as S3, Glue, EMR, Lambda, Redshift, Athena, Kinesis.
- Implement data lake and data warehouse solutions on AWS.
- Ensure data quality, consistency, and security across all processing stages.
- Collaborate with data scientists, analysts, and business stakeholders to deliver data solutions.
- Monitor, troubleshoot, and optimize data workflows for performance and cost efficiency.
- Follow best practices for code versioning, CI/CD, and cloud resource management.
- Write unit tests and maintain documentation for all developed solutions.
Required Skills & Qualifications
- Strong programming skills in Python (data manipulation, APIs, automation).
- Hands-on experience with PySpark for distributed data processing.
- Proficiency in AWS cloud services (S3, Glue, EMR, Lambda, Redshift, Athena, IAM).
- Solid understanding of SQL and relational database concepts.
- Experience with data lake and data warehouse architectures.
- Knowledge of ETL/ELT design patterns and best practices.
- Familiarity with Git and CI/CD tools (e.g., Jenkins, GitHub Actions).
- Strong problem-solving and debugging skills.
- Bachelor’s degree in Computer Science, Information Technology, or related field.
Preferred Skills
- Experience with streaming data (Kafka, Kinesis).
- Knowledge of Docker and containerized deployments.
- Familiarity with Terraform or CloudFormation for infrastructure as code.
- Exposure to machine learning pipelines in a big data environment.
- Understanding of data governance and compliance standards.
Work Environment
- Location: Onsite / Remote / Hybrid (as per company policy)
- Team: Works closely with data engineers, analysts, and cloud architects.
- Tools: AWS Cloud, Spark, Python, SQL, Git, CI/CD pipelines.
À propos de Cognizant
Cognizant (NASDAQ : CTSH) est un AI Builder et une entreprise de services numériques (ESN) élaborant des solutions complètes d’IA maximisant les investissements pour des résultats concrets. Sa profonde expertise des métiers, des processus et des technologies lui permet d’intégrer dans les systèmes technologiques le contexte unique de chaque organisation de l’ingénierie à la production à l’échelle. Son objectif : améliorer l’efficacité des équipes, créer de la valeur et permettre aux grandes entreprises de rester performantes dans un monde qui évolue rapidement. Pour en savoir plus : cognizant.ai ou @cognizant.
Renseignments suppplémentaires sur l'emploi
Les informations relatives à la rémunération du poste à pourvoir dépendent de la date de publication de l’offre de poste. Cognizant se réserve le droit de modifier ces informations à tout moment, sous réserve des lois applicables.
Cognizant est un employeur soucieux de l'égalité des chances entre candidats. Votre candidature sera étudiée indépendamment de votre race, couleur, sexe, religion, croyances, orientation sexuelle, identité de genre, origine, handicap, informations génétiques, grossesse, statut d'ancien militaire ou de toute autre critère jugé discriminant par les lois européennes ou françaises.
Vous êtes porteur d'un handicap, vous pouvez-nous contacter par courriel [email protected] si vous souhaitez préciser les aménagements nécessaires pour le poste ou les entretiens à venir.
Les candidats peuvent être invités à participer à des entretiens en face à face ou par vidéoconférence. En outre, les candidats peuvent être amenés à présenter une carte d'identité valide lors de chaque entretien.
