Skill: Databricks + Pyspark
Experience: 6 to 9 years
Location: AIA Kochi
Job Summary
Join our multinational corporation as a Developer focusing on PySpark and Python to design and implement scalable data solutions using Databricks platforms. This role demands expertise in managing workflows and SQL in Databricks to support data analytics initiatives in a hybrid work environment during daytime shifts with no travel requirements.
Responsibilities
- Develop test and deploy robust PySpark scripts and Python code to process large-scale datasets efficiently in conjunction with cloud-based data lake infrastructure.
- Design and implement Databricks Workflows to automate data pipeline orchestration ensuring timely data availability for analytics and reporting purposes.
- Create optimized SQL queries using Databricks SQL tools to extract transform and load data while maintaining accuracy and performance.
- Utilize Databricks CLI to manage workspace resources automate routine tasks and enhance productivity throughout the development lifecycle.
- Collaborate closely with data engineers and data scientists to integrate new data sources and refine existing pipelines for meeting evolving business requirements.
- Troubleshoot and resolve performance bottlenecks within data processing workflows by analyzing runtime metrics and applying optimization techniques.
- Apply data validation and quality assurance checks within pipelines to uphold data integrity and compliance with organizational standards.
- Participate in code reviews and contribute to maintaining coding standards documentation and best practices for sustainable development.
- Continuously monitor system activity and usage to proactively identify risks or opportunities for improvements in data infrastructure.
- Support cross-functional teams by delivering data-driven insights and technical expertise to accelerate the achievement of strategic goals.
- Adhere to internal security protocols and data privacy regulations while handling sensitive information throughout the data lifecycle.
- Engage in knowledge sharing and collaborative learning sessions to foster an innovative and inclusive team environment.
- Communicate progress and technical information effectively to stakeholders ensuring transparency and alignment with project timelines.
Qualifications
- Possess a minimum of two years hands-on experience developing data pipelines predominantly using PySpark and Python programming languages.
- Demonstrate proficiency with Databricks Workflows to construct and automate scalable ETL processes within cloud ecosystems.
- Show competence in writing complex queries using Databricks SQL to support advanced analytics use cases and data visualization efforts.
- Have practical skills in utilizing Databricks CLI for environment configuration and administrative operations.
- Exhibit understanding of distributed computing frameworks data architecture principles and best practices in data engineering.
- Hold good-to-have knowledge of additional big data tools and frameworks facilitating seamless integration across platforms.
- Adapt comfortably to a hybrid work model blending onsite collaboration and remote productivity with self-driven accountability.
- Operate primarily in daytime shift hours following company schedule demands without requirements for business travel.
- Communicate fluently in English to interact with global team members and stakeholders effectively.
Certifications Required
Databricks Certified Associate Developer for Apache Spark or equivalent certification preferred.
ข่าวประชาสัมพันธ์แบบสำเร็จรูปของ Cognizant
Cognizant(NASDAQ: CTSH) คือผู้สร้าง AI และผู้ให้บริการด้านเทคโนโลยี ซึ่งเชื่อมช่องว่างระหว่างการลงทุนใน AI และมูลค่าขององค์กรด้วยการสร้างโซลูชัน AI แบบครบวงจรให้แก่ไคลเอนต์ของเรา ความเชี่ยวชาญเชิงลึกด้านอุตสาหกรรม กระบวนการ และวิศวกรรมของเรา ช่วยให้เราผสานบริบทเฉพาะขององค์กรเข้ากับระบบเทคโนโลยีเพื่อเพิ่มศักยภาพมนุษย์ สร้างผลลัพธ์ที่จับต้องได้ และช่วยให้องค์กรระดับโลกก้าวนำหน้าอยู่เสมอในโลกที่เปลี่ยนแปลงไป ดูวิธีดำเนินการได้ที่ cognizant.ai หรือ @cognizant
ข้อมูลการจ้างงานเพิ่มเติม
ข้อมูลเกี่ยวกับค่าตอบแทนมีความถูกต้อง ณ วันที่ประกาศรับสมัครงานนี้ Cognizant ขอสงวนสิทธิ์ในการแก้ไขข้อมูลดังกล่าวได้ตลอดเวลา ภายใต้กฎหมายที่เกี่ยวข้อง
ผู้สมัครอาจถูกขอให้เข้ารับการสัมภาษณ์แบบพบตัวต่อตัวหรือผ่านการประชุมทางวิดีโอ นอกจากนี้ ผู้สมัครอาจถูกขอให้นำเอกสารประจำตัวที่ออกโดยหน่วยงานของรัฐ หรือบัตรประจำตัวที่ออกโดยรัฐบาลซึ่งยังมีผลบังคับใช้ มาแสดงในระหว่างการสัมภาษณ์แต่ละครั้ง
Cognizant เป็นนายจ้างที่ให้โอกาสอย่างเท่าเทียม การสมัครและการพิจารณาคุณสมบัติของคุณจะไม่ถูกตัดสินจากเชื้อชาติ สีผิว เพศ ศาสนา ความเชื่อ รสนิยมทางเพศ อัตลักษณ์ทางเพศ สัญชาติ ความพิการ ข้อมูลทางพันธุกรรม การตั้งครรภ์ สถานะทหารผ่านศึก หรือคุณลักษณะอื่นใดที่ได้รับการคุ้มครองตามกฎหมายของรัฐบาลกลาง รัฐ หรือท้องถิ่น
