ESPECIALISTA BIG DATA
Descrição da oferta de emprego
;
Conhecimentos Técnicos Obrigatórios:
;
Experiência prévia com engenharia de dados;
Implantação, administração, otimização e troubleshooting de problemas com frameworks de Big Data em ambiente ON-PREMISES:
-Cluster Apache Hadoop (armazenamento distribuído com HDFS);
-Cluster Apache Spark;
-Construção da camada de armazenamento com Delta Lake (architecture medallion sobre o HDFS);
-Apache Hive (como metadata dos objetos Delta Lake)Apache Presto (preferencialmente) ou Apache Trino como engrenagem de consultas (SQL like);
Conhecimento aplicado em autenticação/segurança;
Experiência em Delta Lake;
Desenvolvimento em linguagem Python;
Desenvolvimento em Pyspark (Apache Spark);
Desenvolvimento em linguagem SQL (DDL, DML, DQL);
Ter experiência com S.O. Linux (Red Hat Enterprise, Ubuntu Server)
Ter experiência com containers (Dockerfile, build, run, compose, volumes, imagens);
Ter experiência com Gitlab (ou outro versionador de código similar).
Conhecimentos Técnicos Desejáveis:
Clickhouse (SGBD como Datawarehouse);
Jupyter Hub;
Processamento de informações geoespaciais com GeoPandas e Pyspark;
Implantação, administração, otimização e troubleshooting do cluster manager Kubernetes (ON-PREMISES ou em cloud);
Desenvolvimento de dashboards com Qlik Sense;
Conhecimento em Kubernetes para administração e troubleshooting de problemas;
Ter autogerenciamento;
Saber estimar tarefas dentro do cenário atribuído;
Ter boa comunicação;
Saber negociar (prazos, expor cenários)
Conhecimento da aplicação prática do SCRUM.
Formação:
Possuir diploma de ensino superior completo nas seguintes áreas de conhecimento (e suas subáreas), de acordo com a classificação da CAPES da plataforma Sucupira:
Matemática (10100008).
Probabilidade e Estatística (10200002).
Ciência da Computação (10300007).
Engenharias (30000009).
Economia (60300000).
Outra área com ênfase substancial em análise de dados ; ; ; ;
Detalhes da oferta
- First Decision
- Em todo o Brasil
- Indeterminado - Indeterminado
- Indeterminado
- 26/11/2024
- 24/02/2025
Submit recorded data promptly... reliable internet connection for data submission... ready to make your voice heard worldwide? join us in this unique opportunity to be part of a revolutionary ai initiative! french (canadian)-speaking audio data collector (recruitee... position type: independent contractor......
Submit recorded data promptly... reliable internet connection for data submission... outros dados de posição french (canadian)-speaking audio data collector (recruitee... position type: independent contractorproject type: one-time projectindustry: artificial intelligence (ai) about the opportunity: are......
The ability to organize and analyze data effectively is also important... the job involves extracting data from pdf documents and accurately transferring it into excel worksheets... relevant skills include: - proficiency in using pdf to excel conversion tools - strong attention to detail - data organization......
Conduzir a implementação de soluções saas e ipaas alinhadas às necessidades da empresa... conhecimento sólido dos processos de compra, produção, gestão de estoques e vendas, sendo fundamental para alinhar soluções de ti às necessidades operacionais e estratégicas da empresa habilidade para elaborar documentações......
Conhecimento sólido dos processos de compra, produção, gestão de estoques e vendas, sendo fundamental para alinhar soluções de ti às necessidades operacionais e estratégicas da empresa ter preferência por soluções padronizadas, optando por soluções 'de prateleiras' em vez de personalizadas, buscando......
Experiência em exposição e consumo de serviço soap;- conhecimentos sobre melhores práticas em soa e patterns de integração;- conhecimento sobre processos de ci/cd;- conhecimento sobre event driven architecture;- conhecimentos básicos sobre arquitetura cloud... escopo:- desenvolver serviços e processos......
*descrição:*estamos em busca de um profissional experiente em edição de vídeo para integrar nosso dinâmico departamento de marketing interno... requisitos do trabalho *requisitos:*- experiência com imobiliárias (diferencial chave)- conhecimento em rd station e ferramentas de marketing- habilidade em......
Benefícios: vale transporte, vale alimentação ou refeição, plano de saúde, plano odontológico enviar currículos: *****@*****... requisitos do trabalho especialização nas áreas de rh; saber lidar com muita pressão para o encerramento das vagas dentro do prazo estipulado; pacote office; sólidos......
Benefícios: vale transporte, vale alimentação ou refeição, plano de saúde, plano odontológico enviar currículos: *****@*****... requisitos do trabalho especialização nas áreas de rh; saber lidar com muita pressão para o encerramento das vagas dentro do prazo estipulado; pacote office; sólidos......
Outros dados de posição jornada de trabalho: segunda a sexta-feira das 08:00 até as 18:00 - eventuais sábados conforme escala salário inicial r$ 4... apuração de icms st; atendimento a fiscalização; apuração de crédito presumido; conciliação de contas fiscais; suporte técnico ao time; facilitador de......
