Aller au contenu principal

Sr. AWS Data Engineer

00068084172

*Please note, this role is not able to offer visa transfer or sponsorship now or in the future*

Role Tile: Senior AWS Data Engineer

About the role

Design, build, and operate scalable, cloud‑native data platforms supporting batch and streaming use cases, with strong focus on governance, performance, and reliability.

Responsibilities

  1. Programming

· Python: Strong hands-on experience with Python for data engineering tasks, including scripting, automation, and ETL logic development

· PySpark: Proficiency in writing and optimizing PySpark jobs for large-scale data transformations

· SQL: Advanced SQL skills for data querying, transformation logic, and stored procedure conversion from SQL Server

  1. Big Data Processing Frameworks

· Apache Spark: Strong experience with Spark core concepts — RDDs, DataFrames, Datasets, partitioning, and performance tuning

· Data partitioning and optimization: Experience with data skew handling, broadcast joins, caching strategies, and Spark tuning

· AWS Services (Hands-On Experience Required)

  1. AWS Glue ETL: Developing and deploying Glue jobs (Python Shell and Spark), job bookmarks, dynamic frames, and custom connectors

· AWS Glue Data Catalog: Managing databases, tables, crawlers, classifiers, and schema versioning

· AWS Lake Formation: Configuring data lake permissions, fine-grained access control, and data filtering

· AWS Step Functions: Designing and implementing state machines for ETL workflow orchestration, error handling, and retry logic

· AWS Lambda: Writing serverless functions for event-driven triggers, lightweight transformations, and pipeline utilities

· Amazon Aurora: Working with Aurora PostgreSQL compatible for relational data storage and query optimization

· Amazon DynamoDB: Designing and querying NoSQL tables

· Amazon S3: Proficiency in S3 data lake design — partitioning strategies, storage classes, lifecycle policies, and S3 event notifications

· AWS IAM: Understanding of roles, policies, and least-privilege access patterns relevant to data pipeline security

  1. ETL Development & Migration

· Informatica PowerCenter (working knowledge): Ability to read and interpret Informatica workflows, sessions, mappings, and transformations to support conversion to AWS Glue

· ETL framework development: Experience building reusable, configurable ETL frameworks with logging, error handling, retry mechanisms, and metadata-driven execution

· Data pipeline design patterns: Familiarity with incremental loads, CDC (Change Data Capture), full loads, and SCD (Slowly Changing Dimensions)

· SQL Server (working knowledge): Ability to understand SQL Server schemas, stored procedures, and SSIS packages for migration analysis

5. Data Engineering Best Practices

· Data quality and validation: Implementing data quality checks, reconciliation logic, and exception handling within pipelines

· Metadata-driven frameworks: Building configurable pipelines driven by metadata stored in Aurora or DynamoDB

· Logging and observability: Integrating CloudWatch logging, custom metrics, and alerting into data pipelines

· Unit and integration testing: Writing test cases for ETL logic using frameworks such as pytest

· Version control: Proficiency with Git for source code management, branching strategies, and code reviews

What you need to have to be considered

· 8+ years in IT related role

· Strong hands on experience in AWS Cloud, SQL and Python

· Good experience with Kafka/Flink, AWS Glue and Airflow

Work model: On Site

At Cognizant, we strive to provide flexibility wherever possible, and we are here to support a healthy work-life balance though our various wellbeing programs. Based on this role’s business requirements, this is an onsite position requiring 5 days a week in a client or Cognizant office in Charlotte, NC.


La communauté Cognizant : 

Nous sommes une équipe de professionnels dont les membres s'apprécient et se soutiennent mutuellement. Nos collaborateurs sont les garants d'un lieu de travail dynamique, collaboratif et inclusif où chacun peut s'épanouir.

  • Cognizant est une communauté mondiale qui compte plus de 300 000+ collaborateurs dans le monde entier.
  • Nous ne nous contentons pas de rêver de façons idéales, nous apportons des améliorations concrêtes
  • Nous prenons soin de nos collaborateurs, de nos clients, de notre entreprise, de nos communautés et du climat, en faisant ce qui est juste.
  • Nous favorisons un environnement innovant où vous pouvez construire le plan de carrière qui vous convient.

À propos de nous : 
Cognizant (NASDAQ : CTSH) est un concepteur d’IA et un fournisseur de services technologiques. Avec notre gamme de solutions IA full-stack, nous accompagnons nos clients au carrefour de l’investissement dans l’IA et de la valeur ajoutée. Notre grande expertise sectorielle, des processus et de l’ingénierie nous permet de convertir le contexte propre à chaque entreprise en systèmes technologiques amplificateurs du potentiel humain, générateurs de résultats tangibles et garants de l’avantage des acteurs internationaux dans un monde en constante évolution. Découvrez notre méthode sur www.cognizant.com ou suivez @cognizant.

Cognizant est un employeur soucieux de l'égalité des chances entre candidats. Votre candidature sera étudiée indépendamment de votre race, couleur, sexe, religion, croyances, orientation sexuelle, identité de genre, origine, handicap, informations génétiques, grossesse, statut d'ancien militaire ou de toute autre critère jugé discriminant par les lois européennes ou françaises.

Vous êtes porteur d'un handicap, vous pouvez-nous contacter par courriel [email protected] si vous souhaitez préciser les aménagements nécessaires pour le poste ou les entretiens à venir.

Mentions légales : 
Les informations relatives à la rémunération du poste à pourvoir dépendent de la date de publication de l’offre de poste. Cognizant se réserve le droit de modifier ces informations à tout moment, sous réserve des lois applicables.

Les candidats peuvent être invités à participer à des entretiens en face à face ou par vidéoconférence. En outre, les candidats peuvent être amenés à présenter une carte d'identité valide lors de chaque entretien.

Rejoignez notre communauté de talents

Vous n'avez pas encore trouvé la bonne opportunité ? Recevez les dernières offres d'emploi, les événements de recrutement et les actualités de l'entreprise qui vous concernent particulièrement.

S'inscrire