メインコンテンツに移動します。

AWS Glue + Pyspark

00070682691

AIA-Pune
Skill: AWS Glue Python and Pyspark
Exp: 7-12Years


Job Summary

Collaborate as a senior data engineer and data architect to design build and optimize scalable data solutions using PySpark and AWS Glue in a hybrid work model. Apply extensive experience to create robust data pipelines transform complex banking data and ensure high quality data for analytics and regulatory reporting while supporting retail banking initiatives and day shift operations.


Responsibilities

  • Design and implement highly scalable data pipelines using PySpark and AWS Glue to process large volumes of structured and semi structured data with a strong focus on reliability and performance optimization

AWS Glue PySpark Lambda Step functions S3 Redshift Aurora Postgresql SQL Python Airflow CICD GIT

  • Architect end to end data ingestion frameworks that integrate various source systems into centralized data platforms ensuring consistent data modeling and governance aligned with enterprise standards
  • Optimize existing batch and near real time data workflows by analyzing bottlenecks and applying tuning techniques that improve execution time resource utilization and overall system stability
  • Collaborate with business and analytics stakeholders to translate complex retail banking data requirements into clear technical specifications that guide robust data engineering and architecture solutions
  • Develop reusable data transformation components and metadata driven frameworks that reduce duplication improve maintainability and support rapid onboarding of new data sources
  • Implement comprehensive data quality checks and validation rules within pipelines to ensure accuracy completeness and timeliness of data used for reporting risk analysis and customer insights
  • Document data models pipeline designs and operational procedures in a structured and accessible manner so cross functional teams can understand lineage dependencies and usage across the data ecosystem
  • Coordinate with cloud infrastructure teams to define secure and cost efficient deployment patterns on AWS ensuring appropriate resource configuration monitoring alerting and backup strategies for data workloads
  • Support data consumers by providing curated datasets and guidance on data usage enabling analytics teams to derive meaningful insights that improve customer experiences and operational efficiency in retail banking
  • Troubleshoot production issues in data pipelines by performing root cause analysis implementing corrective actions and continuously refining monitoring to minimize business impact during day shift operations
  • Mentor junior data engineers by sharing best practices in PySpark AWS Glue and data architecture helping build team capability and improving consistency across development and delivery activities
  • Contribute to data governance initiatives by aligning data models classification rules and retention practices with regulatory requirements common in retail banking while also promoting ethical and responsible data use
  • Evaluate emerging data engineering tools and architectural patterns recommending adoption where appropriate to enhance scalability resilience and innovation in the company data landscape


Qualifications

  • Demonstrate deep practical expertise in PySpark and AWS Glue including building complex transformations handling large scale data and optimizing jobs for performance and reliability
  • Bring strong experience in designing data architectures such as layered data models and canonical structures that support analytics reporting and regulatory needs in a financial services environment
  • Apply working knowledge of retail banking concepts like accounts transactions and customer journeys to design data solutions that are aligned with domain specific requirements and business terminology
  • Utilize broad proficiency with AWS cloud data services including storage compute and orchestration capabilities to deploy secure and well governed data engineering solutions
  • Exhibit solid skills in SQL and data modeling to define schemas joins and aggregations that produce consistent and trustworthy datasets for downstream analytics and operational reporting
  • Use experience with hybrid working models to collaborate effectively through onsite and remote interactions ensuring clear communication documentation and handoffs across global teams


Certifications Required

AWS Certified Data Analytics Specialty or AWS Certified Solutions Architect Associate recommended for PySpark and AWS Glue based data engineering


コグニザントについて   
コグニザント(NASDAQ: CTSH)は、AI Builderおよびテクノロジーサービスプロバイダーとして、お客様にフルスタックのAIソリューションを構築することで、AI投資と企業価値を結ぶ架け橋となっています。業界、ビジネスプロセス、エンジニアリングに関する当社の深い専門知識を活かし、組織固有のビジネス環境をテクノロジー・システムに組み込みます。これにより、人間の可能性を最大限に引き出し、確かな成果を実現するとともに、急速に変化する世界においてグローバル企業が常に一歩先を行くための支援を行っています。 詳細については、cognizant.ai をご覧ください。  

雇用に関する追加情報
本募集に記載されている報酬情報は、掲載日時点で正確なものです。Cognizantは、適用される法令に従い、いつでも本情報を変更する権利を留保します。

応募者は、対面またはビデオ会議による面接への参加を求められる場合があります。また、各面接の際に、現在有効な州政府または政府発行の身分証明書の提示を求められる場合があります。

Cognizantは機会均等雇用主です。応募および選考において、人種、肌の色、性別、宗教、信条、性的指向、性自認、国籍、障がい、遺伝情報、妊娠、退役軍人の地位、その他連邦法・州法・地方自治体の法律により保護されるいかなる特性に基づく差別も行いません。

あなたが成長し、活躍できるよう支える福利厚生

当社の福利厚生プログラムは、あなたを第一に考えて設計されており、充実し、バランスの取れた健やかな生活を送れるようサポートします。

葉のある植物の青い線画

経済的なウェルビーイング

当社では市場データを定期的に見直し、皆さんがもたらす価値が正しく報酬に反映されるよう努めています。福利厚生は給与だけにとどまらず、退職金・年金制度や金融教育などが含まれる場合があります。

Stay Healthy Midnight Blue RGB

身体的およびメンタルヘルス

有給休暇、可能な範囲での柔軟な働き方、医療保険制度、カウンセリング、メンタルヘルス・アライシップ・プログラムなどを通じて、あなたが自身のウェルビーイングを大切にできるよう支援します。

Build The Career You Want Midnight Blue RGB

あなたのキャリアは、あなたの思い描くかたちで

Cognizantでは35万人以上の職種があり、新しいテクノロジー、業界、勤務地に挑戦する機会が広がっています。キャリア成長に必要なスキルを身につけ、自分らしいキャリアを築くことができます。
Making A Meaningful Impact Midnight Blue RGB

現実社会へのインパクト

あなたが信頼している世界的な大手ブランドを思い浮かべてみてください。その多くが、ビジネスをさらに強化するために私たちを頼りにしています。ここでは、大胆なアイデアを、世界中の人々の暮らしをより良くするソリューションへと形にしていくことができます。

まだ最適なポジションが見つかっていませんか?

あなたに合わせてカスタマイズされた、最新の求人情報、採用イベント、そして会社からのお知らせをお届けします!

最新情報を見逃さない