PCD - ENGENHARIA DE DADOS SÊNIOR

PCD - Engenharia De Dados Sênior - Incentivamos a candidatura de integrantes de todos os grupos minoritários! Sobre a ília Somos especialistas em tecnologia, dados e design, impulsionando a transformação digital de grandes players do mercado há mais de 10 anos, nos setores financeiro, seguros e mobilidade. Com mais de 450 profissionais, estamos presentes no Brasil e Europa, atendendo aos mercados da América Latina, Europa e América do Norte, desenvolvendo produtos digitais de alta qualidade e com foco em resultados de negócios. Somos uma equipe inovadora, criativa e apaixonada por tecnologia. Certificada pelo 5° ano consecutivo como Great Place to work, aqui na ília acreditamos que pessoas mudam o mundo, e investimos nelas. Nossas awesome deliveries são feitas de pessoas para pessoas, afinal awesome people make awesome deliveries! Sobre a vaga: Estamos em busca de um Engenheiro de Dados experiente para liderar a evolução do nosso Data Lake (Arquitetura Medallion), otimizar pipelines ETL e viabilizar insights baseados em dados por meio do desenvolvimento de dashboards. O foco principal do cargo está na gestão de serviços de dados baseados em AWS, como Glue, S3 e Athena, aplicando práticas recomendadas, como otimização de arquivos Parquet. É essencial ter uma base sólida em engenharia de dados, e conhecimentos adicionais em IA generativa e engenharia de prompts são um diferencial valioso. Principais responsabilidades: Liderar a evolução do Data Lake, implementando e otimizando a Arquitetura Medallion (camadas bronze, prata e ouro). Projetar, desenvolver e manter pipelines ETL escaláveis utilizando o AWS Glue e outros serviços nativos da AWS. Utilizar o AWS S3 para armazenamento de dados e o Athena para consulta de datasets, garantindo eficiência de desempenho. Otimizar fluxos de trabalho com foco em arquivos Parquet para eficiência no processamento e armazenamento. Desenvolver e manter dashboards usando ferramentas como AWS Quicksight e Google Looker Studio para gerar insights acionáveis. Colaborar com equipes multidisciplinares para alinhar a infraestrutura de dados e entregáveis às necessidades do negócio. Garantir governança robusta, segurança e conformidade de dados em todas as operações. Responsabilidades Adicionais (IA Generativa): Explorar oportunidades para integrar soluções de IA generativa, especialmente utilizando o AWS Bedrock, para aprimorar fluxos de trabalho de dados e análises. Aplicar técnicas de engenharia de prompts para personalizar soluções baseadas em IA para casos de uso específicos. Pesquisar e contribuir para potenciais integrações com as plataformas de IA da GCP e Azure como parte de estratégias futuras. Requisitos: Experiência comprovada como Engenheiro de Dados, com especialização em arquiteturas de Data Lake e Arquitetura Medallion. Sólida experiência prática com serviços AWS, incluindo Glue, S3 e Athena. Proficiência no manuseio de arquivos Parquet e na otimização de seu uso para armazenamento e consultas. Conhecimento avançado em processos ETL, ferramentas de integração de dados e orquestração de pipelines (ex. : Apache Airflow). Domínio em SQL e Python para processamento e automação de dados. Experiência com ferramentas de BI, como Power BI, Tableau ou similares, para desenvolvimento de dashboards. Diferenciais: Experiência prática com ferramentas de IA Generativa da AWS, especialmente o Amazon Bedrock. Familiaridade com soluções de IA generativa na GCP (Vertex AI, PaLM) e na Azure (Azure OpenAI Service). Compreensão de técnicas de engenharia de prompts e suas aplicações. Desejável: Certificações em AWS (ex. : AWS Certified Data Analytics, AWS Certified Solutions Architect). Conhecimento em CI/CD para pipelines de dados e Infraestrutura como Código (ex. : Terraform, CloudFormation). Fortes habilidades de resolução de problemas e capacidade de atuar em um ambiente rápido e inovador. Benefícios e Incentivos: Nossa contratação é CLT - 40h semanais com jornada flexível, sendo executada 100% de forma remota. Os benefícios da ília são pensados para proporcionar uma experiência AWESOME para cada ílian, abaixo você encontra os benefícios de forma resumida. Para Saúde e bem-estar: Plano de Saúde e Odontológico SulAmérica extensivo a dependentes; Vale Alimentação/Refeição em cartão flexível Picpay benefícios; Seguro de Vida; Auxílio Home-Office em cartão flexível Picpay benefícios; Wellhub (Gympass); TotalPass. Para o seu Desenvolvimento: ília University: Universidade Corporativa com mais de 20 mil cursos disponíveis para desenvolvimento pessoal e profissional; Language Academy: Escola de idiomas para ílians; í-talks e Chapter: Momentos e cerimônias em que o time compartilha práticas, estudos, projetos e ideias. Nas chapters ainda se reúnem pessoas com skills similares para compartilhamento de ideias, práticas e experiências; Gostamos de ir além no cuidado com as nossas pessoas, então dispomos também de alguns benefícios não convencionais: Plano de Saúde PET - Guapeco; Seu Niver, seu bolo! Seu Networking Vale Prêmio - Programa de premiação a indicação de novos funcionários. #J-18808-Ljbffr