Pessoa Arquiteto de Dados Sênior
Effective
Remote
Opportunity also for people with disabilities
Job description
Somos aproximadamente 50k Minsaiters no Mundo e mais de 9k Minsaiters no Brasil e estamos presentes nas maiores empresas em todos os setores. Nossa estrutura permite participar de projetos globais e proporciona um ambiente colaborativo que nos certifica em GreatPlacesToWork e planos diferenciados para Jovens Profissionais também reconhecidos pela Employers for Youth.
Você atuará no nosso time de Serviços Financeiros em um projeto estratégico, utilizando metodologias ágeis e em um ambiente de inovação.
Buscamos profissionais com senso de dono, comprometidos com o sucesso do nosso cliente e com o desenvolvimento da sua carreira dentro da Minsait
Você será um pilar fundamental nos melhores e maiores projetos de TI do Brasil e em nível global.
Venha ser um Minsaiter!
Responsibilities and assignments
💼 Responsabilidades:
O Profissional será responsável por Projetar e implementar a arquitetura de dados adequada no ambiente Databricks, considerando os requisitos de processamento, armazenamento e análise:
- Migração de Dados: Planejar e executar a migração dos dados existentes no ambiente Cloudera para o Databricks, assegurando a integridade e qualidade dos dados durante o processo.
- Desenvolvimento de Pipelines: Criar pipelines de ETL eficientes utilizando as capacidades do Databricks para extrair, transformar e carregar dados de diversas fontes, como bancos de dados, arquivos e APIs.
- Otimização de Desempenho: Identificar e resolver gargalos de desempenho nas consultas e processos, otimizando consultas, particionamento de dados e ajustando configurações do cluster.
- Integração com AWS Services: Integrar o Databricks com outros serviços da AWS, como S3, Redshift e Glue, para construir soluções completas e escaláveis.
- Gerenciamento de Metadados: Configurar e gerenciar metadados no Databricks, garantindo a rastreabilidade e governança dos dados.
- Segurança e Acesso: Implementar práticas de segurança no Databricks, definindo políticas de acesso, autenticação, autorização e criptografia de dados.
- Colaboração e Compartilhamento: Facilitar a colaboração entre cientistas de dados e engenheiros, permitindo o compartilhamento de notebooks, códigos e resultados.
- Monitoramento e Logging: Configurar monitoramento e registros de atividades no Databricks para acompanhar o uso, identificar problemas e garantir a conformidade.
- Treinamento e Mentoria: Fornecer treinamento e orientação para a equipe interna sobre as melhores práticas do Databricks e garantir a adoção eficaz da plataforma.
Requirements and qualifications
📚 Requisitos:
- Profundo conhecimento em Apache Spark e sua utilização no contexto do Databricks.
- Experiência sólida em projetos de migração de dados e sistemas de um ambiente para outro.
- Conhecimento avançado em linguagens de programação como Python ou Scala.
- Habilidade em SQL para criação e otimização de consultas.
- Experiência com arquitetura de dados distribuída e modelagem de dados.
- Familiaridade com práticas de governança de dados e conformidade regulatória.
- Experiência com integração de sistemas e serviços AWS.
- Capacidade de diagnosticar problemas complexos e propor soluções eficazes.
- Boas habilidades de comunicação e capacidade de trabalhar em equipe.
****Certificações relevantes em Databricks ou AWS são uma vantagem*****
Se você possui a experiência e as habilidades necessárias para se destacar como Nome do Cargo, candidate-se! ✨ Aguardamos ansiosamente para conhecer você e discutir como sua expertise pode contribuir para o sucesso de nossa equipe!
Additional information
TRABALHE NA MINSAIT
- Modelo de contratação CLT.
- Plano de Saúde subsidiado pela empresa para o titular.
- Opção de inclusão de dependentes no Plano de Saúde com desconto em folha de pagamento.
- Assistência Odontológica (opcional).
- Opção de inclusão de dependentes no Plano de Assistência Odontológica com desconto em folha de pagamento.
- Vale Refeição ou Vale Alimentação.
- Vale Transporte (opcional).
- Gympass (Acesso a mais de 700 academias em todo o Brasil com planos a partir de R$ 39,90 descontado em folha de pagamento).
- Opção de inclusão de dependentes no Gympass (até 03 dependentes - pago via cartão de crédito).
- Parcerias com grandes marcas de consumo.
- Convênio com o SESC para titular e dependentes.
- Convênios para descontos com instituições de ensino (graduação e pós-graduação) e escola de idiomas.
- Seguro de vida em grupo.
Nosso compromisso com a diversidade é um elemento-chave da nossa cultura: Igualdade de oportunidades, respeito pelas pessoas e não discriminação são princípios de atuação para todos os profissionais da Minsait. Integramos o Bloomberg Gender-Equality Index (GEI) 2021 em termos de diversidade e igualdade de gênero.
Todas as nossas vagas são abertas também para PCDs.
Olá, somos a Minsait!
A Minsait é uma empresa do grupo Indra Company. Somos uma empresa de transformação digital e tecnologia da informação, e atuamos nas operações críticas dos nossos clientes, aportando tecnologias disruptivas e serviços especializados.
Estamos presentes em mais de 140 países, e combinamos nossa experiência em Cloud, Segurança, Payments e Phygital com a tecnologia mais inovadora para impulsionar nossos negócios, gerando um impacto positivo na sociedade.
Há mais 25 anos no Brasil, somos reconhecidos por oferecer um ambiente estimulante, aprendizado contínuo, oportunidades de crescimento e mobilidade nacional e internacional para nossos talentos. Nossos mais de 8.000 profissionais espalhados de norte a sul do país, atestam nossa cultura de respeito, diversidade e inclusão.
Em 2022 conquistamos pelo segundo ano consecutivo a certificação do Great Place to Work Institute (GPTW), que revela que as pessoas são felizes aqui, fruto do clima positivo que todos nós construímos juntos. Além disso, em 2022 fomos reconhecidos pelo prêmio Gupy Destaca como um dos RHs mais inspiradores do país, e como uma das Melhores Empresas para Jovens Profissionais em Tecnologia, de acordo com o estudo da EFY Tech Brasil.
Conheça mais sobre a Minsait