Latest news

Big Data Administrator

Oportunidade de emprego Big Data Administrator Xpand IT

Big Data Administrator

Problemas complexos exigem a experiência certa! Um dos maiores desafios da atualidade é o correto armazenamento e processamento de dados tendo em consideração estes três domínios (3Vs): VolumeVelocidade e Variedade.  

Na Xpand IT, a área tecnológica de Big Data desenvolve e implementa arquiteturas e soluções de software que tratam da captura, ingestão, armazenamento e gestão de dados críticos de grandes clusters de informação onde os 3Vs estão sempre presentes. Tiramos partido de um conjunto de frameworks avançadas como Spark, Kafka, Hive/Impala, Azure Data Services ou MongoDB usando JavaScala como linguagens de programação para interagir com estas frameworks. 

QUAIS AS PRINCIPAIS RESPONSABILIDADES?

Enquanto Big Data Administrator na Xpand IT vais ser fundamental para garantir a escalabilidade e performance de toda a rede de clusters do ecossistema Big Data. No dia-a-dia, estarás presente não só na análise e conceção de sistemas distribuídos de larga escala, mas também na sua gestão e integração com outros sistemas externos.  Para estes sistemas críticos, é crucial um foco especial ndesempenho e segurança, bem como na implementação das melhores práticas de desenvolvimento de serviços de consumo de dados. Esta função trabalha em estreita colaboração com as equipas de desenvolvimento para desenhar, desenvolver e instalar as melhores soluções aplicacionais de consumo, processamento armazenamento de dados em grande escala. 

Diariamente serás responsável por: 

  • Gerir Sistemas de Big Data em larga escala em ambientes críticos 
  • Instalar / atualizar e certificar plataformas de Big Data
  • Implementar regras e políticas de segurança em plataformas de Big Data
  • Recomendar e atualizar periodicamente as plataformas de Big Data (hot fixes, patches, etc.)
  • Configurar boas práticas para monitorização da infraestrutura dos clusters Big Data
  • Analisar requisitos de hardware e software para cada projeto a ser implementado
  • Projetar e desenvolver novos processos para melhor manutenção dos ambientes
  • Participar e ajudar resolver problemas de desempenho, escalabilidade e segurança

// Stacks: Cloudera, Confluent, Azure Data Services, MongoDB; Kerberos ou Windows Active Directory

Big Data Administrator Confluent
Big Data Administrator MongoDB
Big Data Administrator Xpand IT
Big Data Administrator Xpand IT
Big Data Administrator Xpand IT
Big Data Administrator Xpand IT

QUE SKILLS PRECISAS DE TER?

  • Licenciatura e/ou Mestrado em Informática e ComputadoresSistemas de Informação ou Ciência da Computação
  • Conhecimentos avançados de sistemas operativos Linux
  • Bons conhecimentos de shell scripting
  • Conhecimentos sobre os objetivos e terminologia de sistemas distribuídos de alta disponibilidade
  • Curiosidade pelas tecnologias de Big Data (stack Hadoop, Kafka e MongoDB 
  • Boa capacidade de comunicação e facilidade em trabalhar em equipa, com foco na resolução de problemas complexos
  • Inglês fluente (escrito e falado)

// Pontos extra para: 

  • Conhecimentopráticos de plataformas como Spark, Hive ou Apache Hadoop

// Sabe mais sobre a área de Big Data:

Candidata-te aqui

Enquanto Big Data Administrator todos os dias são desafiantes: entre deployments de clusters de raiz, optimização e configuração de serviços em sistemas distribuídos, é necessário mantermos um leque de conhecimento vasto sobre os vários serviços que compõem o ecossistema bem como lidar com vários contextos distintos.

Pedro Martins, Big Data Administrator @Xpand IT
Big Data Administrator Xpand IT

Há vídeos que valem mais do que mil palavras…

Xpand IT: You Have to Live it!

Summer Trip anual

Be an Xpander

Recrutamento

Life at Xpand IT

XTech Community

Meetup

Sara GodinhoBig Data Administrator

Read more in

Want to get amazing Big Data, Business Intelligence, Middleware
Mobile articles & news directly from our experts?
Subscribe to our blogs now.