Data Engineer
We are looking for a skilled Data Engineer to join our team. The ideal candidate will have a strong background in data engineering and be proficient in JAVA/Kotlin, Apache Spark, Apache Hive, Apache Airflow, and SQL Server. Responsible for designing, developing, and maintaining our data infrastructure and pipelines.
Primary Skills:
Java/Kotlin : Proficient in writing clean, efficient, and maintainable code using Java/Kotlin, or other modern programming languages.
Apache Spark, Hadoop , Kafka : Experience with Spark for large-scale data processing and Proven experience in distributed data engineering environments.
Apache Hive: Knowledge of Hive for data warehousing solutions.
Apache Airflow: Proficiency in using Airflow for orchestrating complex data workflows.
SQL Server: Experience with SQL Server for database management and querying.
Software Testing Principles : Developed unit and integration tests for data transformation logic usingPyTest and JUnit, ensuring data accuracy and reliability across multiple pipeline stages.
Docker, Kubernetes - Hands-on experience with Docker, Kubernetes, and cloud-native development to deploy and manage data services.
CI/CD tools - Familiarity with CI/CD tools (e.g., Jenkins, GitHub Actions, GitLab CI)
Responsibilities:
Design, build, and maintain scalable data pipelines across distributed systems using modern orchestration tools.
Implement and manage data governance frameworks to ensure data quality, security, and compliance.
Optimize and troubleshoot data processing jobs to ensure performance, reliability, and fault tolerance.
Apply software testing principles (unit and integration testing) to validate data workflows and transformations.
Develop and maintain data warehousing solutions with Apache Hive.
Orchestrate data workflows using Apache Airflow.
Manage and query databases using SQL Server.
Collaborate with data scientists and analysts to understand data requirements and deliver solutions.
Leverage containerization technologies (Docker, Kubernetes) to deploy and manage data services.
Implement CI/CD pipelines to automate testing, deployment, and monitoring of data applications.
Ensure data quality and integrity across all data pipelines.
Qualifications:
Proven experience as a Data Engineer or in a similar role.
Strong programming skills in Kotlin/Java.
Hands-on experience with Apache Spark, Apache Hive, Apache Airflow, and SQL Server.
Familiarity with cloud platforms (e.g., AWS, GCP, Azure) is a plus.
Excellent problem-solving skills and attention to detail.
Strong communication and teamwork abilities.
Over Cognizant
Cognizant (NASDAQ: CTSH) is een bouwer van AI-oplossingen en een leverancier van technologiediensten. Wij slaan de brug tussen AI-investeringen en ondernemingswaarde door het bouwen van full-stack AI-oplossingen voor onze klanten. Onze diepgaande kennis van sectoren, processen en engineering stelt ons in staat om de unieke context van een organisatie te verankeren in technologische systemen. Deze systemen versterken het menselijk potentieel, realiseren tastbare resultaten en geven wereldwijde ondernemingen een voorsprong in een snel veranderende wereld. Ontdek hoe op cognizant.ai of @cognizant.
Aanvullende arbeidsinformatie
De informatie over de beloning is correct op de datum van deze vacature. Cognizant behoudt zich het recht voor om deze informatie op elk moment te wijzigen, met inachtneming van de toepasselijke wetgeving.
Van sollicitanten kan worden verwacht dat zij gesprekken bijwonen, persoonlijk of via een videogesprek. Daarnaast kan van kandidaten worden gevraagd om tijdens elk gesprek een geldig, door de overheid uitgegeven identiteitsbewijs (zoals een identiteitskaart of paspoort) te tonen.
Cognizant is een werkgever die gelijke kansen biedt. Je sollicitatie en kandidatuur worden niet beoordeeld op basis van ras, huidskleur, geslacht, religie, levensovertuiging, seksuele geaardheid, genderidentiteit, nationale afkomst, handicap, genetische informatie, zwangerschap, veteranenstatus of enige andere eigenschap die wordt beschermd door federale, regionale of lokale wetgeving.
