A própria plataforma de dados da Rapolabs é a evidência mais poderosa de uma organização Nativa de IA.
: Estamos procurando um Data Engineer para vivenciar essa missão empolgante juntos!
[Aqui está a organização que você fará parte 🚀]
Na era da IA, o valor de 'bons dados' aumentou consideravelmente. Especialmente, a Rapolabs, que aspira ser uma organização nativa de IA, compartilha esse valor entre todos os seus membros. A equipe de engenharia de dados da Rapolabs tem a missão de produzir e gerenciar continuamente esses bons dados. Portanto, não estamos apenas entregando dados, mas também projetando pipelines considerando as características físicas dos dados e o contexto de domínio, bem como as necessidades dos colegas que utilizam esses dados. Atualmente, os dados operam como a máquina de crescimento do Quinit e Palduck, e estamos procurando alguém disposto a ajudar a levar a plataforma de dados a um nível superior. Trabalhar em uma plataforma de comércio em rápido crescimento, onde os dados são fornecidos no momento em que são mais necessários, na forma mais precisa, proporciona contínuas reflexões e oportunidades de desenvolvimento.
Principais responsabilidades
[Ao se juntar, você fará esse tipo de trabalho 🚀]
• Projetar e construir pipelines para analisar os enormes dados gerados pelo Quinit e Palduck.
• Carregar dados em tempo real de dezenas de microsserviços para o BigQuery através de CDC, melhorando a pipeline de processamento em streaming com Kafka e Debezium.
• Melhorar a lógica de exploração de tabelas para aumentar a precisão do agente de dados baseado em IA e construir uma pipeline de avaliação de respostas para monitorar a qualidade.
• Construir um novo sistema Mart que forneça a lógica comercial essencial em formato de tabela e migrar os Mart principais de sistemas legados existentes.
• Criar uma governança onde os produtores de dados gerem metadados e construir uma plataforma de metadados que facilite a busca de dados por todos os membros da organização.
• Estabelecer um sistema de controle de qualidade de dados classificando a urgência das tabelas, definindo padrões de qualidade e estabelecendo e operando processos de resposta a problemas.
[A Rapolabs está buscando pessoas com essas qualificações 🚀]
• Ter mais de 5 anos de experiência em engenharia de dados ou experiência e habilidades equivalentes
• Habilidade em SQL e capaz de trabalhar de forma competente com pelo menos uma outra linguagem de programação, como Python
• Ter experiência em construir e operar infraestrutura de dados baseada em nuvem como BigQuery, Airflow
• Ter experiência usando sistemas de processamento de dados de código aberto como Kafka, Spark para construir pipelines de dados em grande escala
• Ter experiência na implementação e operação de agentes de IA ou funcionalidades baseadas em LLM em serviços reais ou sistemas internos.
Qualificações preferenciais
[Seria ainda melhor se você tiver essa experiência! 🚀]
• Ter experiência na construção e gestão de infraestrutura de dados em ambientes Kubernetes
• Ter experiência em gerenciar a qualidade dos dados ou construir catálogos de dados usando Dataform
• Ter experiência na construção de pipelines de dados em tempo real usando CDC (Captura de Dados de Mudança)
• Ter experiência em escalar infraestrutura de dados em ambientes de comércio ou plataforma em rápido crescimento.
[Este é o seu caminho para se juntar à Rapolabs 🚀]
• Processo de seleção: revisão de documentos ＞ primeira entrevista técnica > segunda entrevista cultural > negociação de condições > aceitação final
◦ O processo pode mudar ou ser ampliado dependendo da agenda e das circunstâncias, e será anunciado com antecedência.
◦ Independentemente do resultado das entrevistas (aceito/rejeitado), todos os candidatos serão contatados individualmente dentro de 1 a 2 semanas.
◦ Para funcionários permanentes, aplica-se um período de experiência de três meses. Durante esse período, o salário será pago 100%, e a duração do período de experiência pode ser estendida ou encerrada conforme a avaliação.
◦ Se informações imprecisas ou falsas forem detectadas nos currículos ou documentos apresentados durante o processo de recrutamento, a aceitação pode ser cancelada.
[Você pode crescer na equipe de engenharia de dados 🚀]
• Evoluir a plataforma de dados para se alinhar à era da IA. Projetar e construir agentes de dados baseados em IA e plataformas de metadados.
• Obter experiência na reformulação da arquitetura de dados desde o zero enquanto migra de infraestruturas legadas para novos sistemas.
• Ter a oportunidade de estabelecer a governança de dados em uma plataforma de comércio em rápido crescimento e criar uma cultura de dados em toda a organização.
• Vivenciar todo o espectro da engenharia de dados, desde a gestão da qualidade dos dados até o streaming em tempo real, crescendo para se tornar um engenheiro sênior.
[Palavras de um colega que trabalhará com você 🚀]
Nossa equipe está completamente em processo de criar uma nova plataforma de dados. Estamos construindo agentes de dados baseados em IA, eliminando sistemas legados e criando simultaneamente novos sistemas Mart e plataformas de metadados. Em um ambiente como este, não há resposta definida, e devemos validar rapidamente e ter coragem de abrir mão para encontrar algo realmente impactante. Por isso, estamos procurando alguém que não apenas mantenha as pipelines existentes, mas que também deseje definir coletivamente a direção da plataforma de dados. Vamos juntos aprofundar o que significa 'bons dados' na era da IA e ajudar a criá-los.
