Descrição de Vaga



Código: 4452
Título da vaga: Engenheiro de Dados Sênior (Lead Engineer)
Local: São Paulo,São Paulo
Região: Outra
Tipo de emprego: Efetivo
Nível Profissional:
NÍvel Acadêmico: Ensino Superior Completo
Turno/Horas:
Habilidades: Engenheiro de Dados Sênior (Lead Engineer)
Responsabiliza-se e garante a construção/desenvolvimento/implementação da solução técnica.
Atividades:
a) Entendimento funcional do requisito de negócio e traduzir para fluxo de dados.
b) Modelagem de dados em Hive/HBase.
c) Implementação de fluxos de dados (pipelines) utilizando principalmente com Spark para distribuição e processamento paralelo. O destino de dados pode ser arquivos, API, ElasticSearch ou SFTP. Linguagem de programação com Scala.
d) Implementação de fluxos de dados com arquitetura orientada a eventos (Apache Kafka), utilização de padronização de tipo de mensagem Avro/protobuf/json,

Tecnologias:
Git
Jetbrains IntelliJ
Hadoop: YARN, HIVE
Apache HBase
Apache Spark
Apache Kafka
Protocolo Protobuf
Bash Shell Script

Categoria:
Remuneração Básica: -   - 
Benefícios: 0
Resumo da Vaga: Engenheiro de Dados Sênior (Lead Engineer)
Responsabiliza-se e garante a construção/desenvolvimento/implementação da solução técnica.
Atividades:
a) Entendimento funcional do requisito de negócio e traduzir para fluxo de dados.
b) Modelagem de dados em Hive/HBase.
c) Implementação de fluxos de dados (pipelines) utilizando principalmente com Spark para distribuição e processamento paralelo. O destino de dados pode ser arquivos, API, ElasticSearch ou SFTP. Linguagem de programação com Scala.
d) Implementação de fluxos de dados com arquitetura orientada a eventos (Apache Kafka), utilização de padronização de tipo de mensagem Avro/protobuf/json,

Tecnologias:
Git
Jetbrains IntelliJ
Hadoop: YARN, HIVE
Apache HBase
Apache Spark
Apache Kafka
Protocolo Protobuf
Bash Shell Script



Enviar este trabalho para um amigo
Seu nome: 
O endereço de email do seu amigo: 
Importar seus Contatos:

Compartilhar essa vaga

Share