ob Title: - Databricks with Pyspark
Location: - AIA Hyderabad
Minimum 9 to 12 years of experience
1. Job Title : Architect 2. Job Summary : Join our dynamic team as a Demand Role Architect where you will leverage your extensive experience in Spark in Scala Delta Sharing and Databricks technologies. You will play a pivotal role in designing and implementing cutting-edge data solutions ensuring seamless data integration and management. Your expertise will drive innovation and efficiency contributing to our companys success and societal impact. 3. Experience : 12 - 16 years 4. Required Skills : Technical Skills: Spark in Scala Delta Sharing Databricks Unity Catalog Admin Databricks CLI Delta Live Pipelines Structured Streaming Risk Management Apache Airflow Amazon S3 Amazon Redshift Python Databricks SQL Databricks Delta Lake Databricks Workflows PySpark Domain Skills: 5. Nice to have skills : Domain Skills: 6. Technology : Cloud Modernization/Migration 7. Shift : Day 8. Responsibilities : - Design and implement scalable data architectures using Spark in Scala and Databricks technologies to optimize data processing and analytics workflows. - Oversee the integration of Delta Sharing and Databricks Unity Catalog Admin to enhance data governance and security across the organization. - Provide technical expertise in Databricks CLI and Delta Live Pipelines to streamline data operations and improve workflow automation. - Collaborate with cross-functional teams to develop and maintain structured streaming solutions ensuring real-time data processing and analysis. - Implement risk management strategies to mitigate potential data-related risks and ensure compliance with industry standards. - Utilize Apache Airflow for orchestrating complex data workflows ensuring efficient data pipeline management and execution. - Manage data storage and retrieval processes using Amazon S3 and Amazon Redshift optimizing data accessibility and performance. - Develop and maintain Python scripts for data manipulation and transformation enhancing data processing capabilities. - Leverage Databricks SQL and Databricks Delta Lake to perform advanced data analytics and drive data-driven decision-making. - Implement and manage Databricks Workflows to automate data processing tasks and improve operational efficiency. - Utilize PySpark for large-scale data processing ensuring high performance and scalability of data solutions. - Collaborate with stakeholders to understand business requirements and translate them into effective data solutions. - Ensure data solutions align with the companys strategic goals and contribute to overall business success. Qualifications - - Possess a minimum of 12 years of experience in data architecture and engineering roles with a strong focus on Spark in Scala and Databricks technologies. - Demonstrate proficiency in Delta Sharing Databricks Unity Catalog Admin and Databricks CLI for effective data management. - Exhibit expertise in Delta Live Pipelines and Structured Streaming for real-time data processing. - Have a solid understanding of risk management principles and practices in data environments. - Show experience with Apache Airflow Amazon S3 and Amazon Redshift for data workflow orchestration and storage management. - Proficient in Python programming for data manipulation and transformation tasks. - Skilled in Databricks SQL and Databricks Delta Lake for advanced data analytics. - Experience with Databricks Workflows and PySpark for automating data processes and large-scale data processing. 9. Job Location : Primary Location :INTNCHNA16(ITIND COG KITS Campus(CKC)SDB2&3 SEZ) Alternate Location :NA NA Alternate Location 1 :NA NA 10. Job Type : Manager - Projects [50PM00] 11. Demand Requires Travel? : No 12. Certifications Required : NA
Ce que nous offrons
- La possibilité d’avoir une carrière avec un impact. Ici, vous avez la possibilité de partager vos idées transformatrices pour aider notre entreprise et nos clients à améliorer le quotidien de tous.
- Prenez votre carrière en main grâce à notre écosystème d'apprentissage et de développement. Et lorsque vos ambitions changent ou que nous vous offrons de nouvelles occasions, nous vous aidons à pivoter en vous proposant des formations et des conseils pour trouver des postes qui pourraient mieux vous convenir.
- L’occasion de s'épanouir au sein d’une communauté diversifiée. Nous célébrons les expériences et perspectives d’autrui et encourageons un sentiment d'appartenance à travers nos groupes d'affinité et nos initiatives en matière de diversité et d'inclusion.
- Rémunération compétitive qui comprend un salaire concurrentiel et une pension avec des contributions équivalentes.
- Des prestations de soins de santé et financières flexibles pour vous soutenir, ainsi que vos personnes à charge admissibles, dès le premier jour au travail.
- Une vraie conciliation travail-vie personnelle. Nous offrons des vacances, des modalités de travail flexibles, des occasions de bénévolat, des événements sociaux et bien d’autres afin que vous puissiez être au mieux.
À propos de nous
Cognizant (NASDAQ : CTSH) est un concepteur d’IA et un fournisseur de services technologiques. Avec notre gamme de solutions IA full-stack, nous accompagnons nos clients au carrefour de l’investissement dans l’IA et de la valeur ajoutée. Notre grande expertise sectorielle, des processus et de l’ingénierie nous permet de convertir le contexte propre à chaque entreprise en systèmes technologiques amplificateurs du potentiel humain, générateurs de résultats tangibles et garants de l’avantage des acteurs internationaux dans un monde en constante évolution. Découvrez notre méthode sur www.cognizant.com ou suivez @cognizant.
Renseignments suppplémentaires sur l'emploi
Cognizant est un employeur souscrivant au principe de l’égalité d’accès à l’emploi. Votre candidature et votre dossier ne seront pas examinés en fonction de la race, de la couleur, du sexe, de la religion, des croyances, de l'orientation sexuelle, de l'identité de genre, de l'origine nationale, du handicap, de l'information génétique, de la grossesse, du statut d'ancien combattant ou de toute autre caractéristique protégée telle que décrite par les lois fédérales, provinciales ou locales.
Si vous avez un handicap qui nécessite un aménagement raisonnable pour rechercher une offre d'emploi ou poser une candidature, envoyiez un courriel à [email protected] avec votre demande et vos coordonnées.
Les exigences linguistiques varient selon les postes, mais nous demandons à tous les candidats d’avoir une connaissance de base de l’anglais afin de faciliter les communications internes à l’échelle de l’entreprise. Pour les postes basés au Québec, une maîtrise de l’anglais est requise puisque vous fournirez des services et collaborerez avec des parties prenantes situées hors de la province, qui ne parlent pas nécessairement le français.