Pular para o conteúdo principal

Spark

uma pessoa em pé em um palanque fazendo um discurso


Job Summary

We are seeking a Sr. Developer with 4 to 6 years of experience to join our team. The ideal candidate will have expertise in Spark in Scala Apache Airflow Python and Databricks SQL. Experience in Asset Management Operations is a plus. This is a hybrid work model with day shifts and no travel required.


Responsibilities

  • Develop and maintain scalable data pipelines using Spark in Scala to ensure efficient data processing.
  • Implement and manage workflows using Apache Airflow to automate data tasks and ensure timely execution.
  • Write clean efficient and maintainable code in Python to support various data engineering tasks.
  • Utilize Databricks SQL to perform complex queries and data transformations for analytics and reporting.
  • Collaborate with cross-functional teams to understand data requirements and deliver solutions that meet business needs.
  • Conduct code reviews to ensure code quality and adherence to best practices.
  • Troubleshoot and resolve data pipeline issues to maintain data integrity and availability.
  • Optimize data processing performance to improve system efficiency and reduce latency.
  • Document data workflows processes and code to ensure knowledge sharing and maintainability.
  • Stay updated with the latest industry trends and technologies to continuously improve data engineering practices.
  • Provide technical guidance and mentorship to junior developers to foster team growth.
  • Participate in agile ceremonies and contribute to sprint planning retrospectives and daily stand-ups.
  • Ensure compliance with data governance and security policies to protect sensitive information.

    • Qualifications

  • Must have strong experience in Spark in Scala for developing scalable data pipelines.
  • Must have hands-on experience with Apache Airflow for workflow automation.
  • Must be proficient in Python for data engineering tasks.
  • Must have experience with Databricks SQL for data querying and transformation.
  • Nice to have experience in Asset Management Operations domain.
  • Must have excellent problem-solving skills and attention to detail.
  • Must have strong communication and collaboration skills.
  • Must be able to work in a hybrid work model with day shifts.
  • Must be able to work independently and as part of a team.
  • Must have a proactive attitude and a willingness to learn new technologies.
  • Must have a strong understanding of data governance and security practices.
  • Must be able to document processes and code effectively.

    • Certifications Required

    Certified Spark Developer Apache Airflow Certification Python Certification

    A comunidade Cognizant:

    Somos uma equipe de alto calibre que aprecia e apoia uns aos outros. Nosso pessoal defende um local de trabalho enérgico, colaborativo e inclusivo, onde todos possam prosperar.

    • A Cognizant é uma comunidade global com mais de 300,000 funcionários em todo o mundo.
    • Não sonhamos apenas com um caminho melhor – nós fazemos acontecer.
    • Cuidamos de nossas pessoas, clientes, empresa, comunidades e clima fazendo o que é certo.
    • Promovemos um ambiente inovador onde você pode construir o plano de carreira certo para você.

    Quem somos:

    A Cognizant é uma das principais empresas de serviços profissionais do mundo, transformando os modelos de negócios, operação e tecnologia dos clientes para a era digital. Nossa abordagem consultiva exclusiva baseada no setor ajuda os clientes a visualizar, construir e administrar negócios mais inovadores e eficientes. Com sede nos EUA, a Cognizant (membro do NASDAQ-100 e uma das Melhores Empregadoras do Mundo da Forbes 2024) é consistentemente listada entre as empresas mais admiradas do mundo. Saiba como a Cognizant ajuda os clientes a liderar com o digital em nosso site.

    A Cognizant é uma empregadora que investe em equidade. Sua candidatura não será pautada em raça, cor, gênero, sexualidade, credo, origem, deficiência, gravidez ou qualquer outra característica protegida pelas leis brasileiras.

    Se você tem uma deficiência que requer adaptações razoáveis para procurar uma vaga de emprego ou enviar uma candidatura, envie um e-mail para [email protected] com sua solicitação e informações de contato.

    Disclaimer:

    As informações de compensação são precisas a partir da data desta publicação. A Cognizant se reserva o direito de modificar essas informações a qualquer momento, sujeito à lei aplicável.

    Os candidatos podem ser obrigados a comparecer a entrevistas presenciais ou por videoconferência. Além disso, os candidatos podem ser obrigados a apresentar seu documento de identificação emitido pelo estado ou governo atual durante cada entrevista.

    Embora nosso sistema permita a candidatura em todos os idiomas, o(s) idioma(s) e o(s) nível(is) de proficiência exigidos para o trabalho variam. No entanto, é necessário um nível básico de inglês para fins de comunicação em toda a empresa.

    Junte-se à nossa comunidade de talentos

    Você ainda não encontrou a sua oportunidade? Receba as últimas atualizações sobre oportunidades de emprego, eventos de recrutamento e notícias da empresa personalizadas para você.

    Inscreva-se