Especialista em LLM e Prompt Engineering

Este especialista terá a missão de elevar agentes de IA já prototipados ao nível de soluções robustas em produção, integrando LLM e dados reais da empresa. Será responsável por definir e aplicar técnicas avançadas de engenharia de prompt e estratégias de interação com LLMs para melhorar a precisão, consistência e controlabilidade das respostas desses agentes. O foco do papel é garantir que os agentes forneçam respostas úteis e seguras, alinhadas aos objetivos do negócio, por meio de prompts bem elaborados, uso de funções auxiliares e monitoramento contínuo do desempenho dos modelos em ambiente de produção.

• Implementar e gerenciar o deploy de modelos de linguagem (como APIs do OpenAI, modelos locais via Ollama ou outras plataformas), garantindo integração perfeita dos LLMs à nossa plataforma.

• Projetar, testar e otimizar prompts avançados para os agentes de IA, utilizando técnicas de prompt engineering (ex.: exemplos few-shot, chain-of-thought prompting) para guiar o raciocínio do modelo e controlar o formato/estilo das respostas conforme as necessidades de cada caso de uso.

• Desenvolver estratégias para incorporar funções auxiliares ou ferramentas de apoio ao LLM – por exemplo, integrações que permitam ao agente buscar dados em bases de conhecimento, executar cálculos ou consultar APIs externas – ampliando as capacidades dos agentes além do texto livre.

• Aplicar métodos de avaliação automatizada e humana da qualidade das respostas dos agentes: definir métricas objetivas (precisão, relevância, utilidade), implementar testes A/B de diferentes variantes de prompt/modelo e coordenar ciclos de feedback com usuários para melhoria contínua.

• Monitorar ativamente o desempenho dos modelos em produção (observabilidade do comportamento dos LLMs), criando logs e dashboards que rastreiem taxas de sucesso, tempos de resposta, custos de API e ocorrências de erros ou respostas indesejadas, a fim de identificar rapidamente oportunidades de ajuste.

• Colaborar com o Engenheiro de Arquitetura de Sistemas e Dados e com o Engenheiro de Dados para assegurar que os agentes de IA estejam utilizando dados atualizados e corretos, configurando pipelines de dados que alimentem o contexto dos modelos (por exemplo, implementação de RAG com base no data lake da empresa, quando aplicável).

• Refinar os agentes de IA existentes, transformando-os em produtos estáveis: ajustar prompts e parâmetros do modelo para melhorar a exatidão das respostas, evitar ambiguidades e garantir consistência no tom e nas políticas definidas (incluindo filtros de segurança e conformidade nas respostas).

• Executar testes rigorosos de comportamento dos agentes antes de cada release, incluindo cenários de borda e tentativas de uso indevido (prompt injection, perguntas capciosas), afinando os prompts ou adicionando validações para garantir robustez e segurança das interações em produção.

• Documentar as abordagens de prompt engineering adotadas, criando diretrizes reutilizáveis para desenvolvimento de futuros agentes de IA e contribuindo para o conhecimento interno da empresa em técnicas de LLM.

• Acompanhar as evoluções na área de IA generativa e LLMs (novos modelos, técnicas de prompt, ferramentas de avaliação) para incorporar as melhores práticas e manter os agentes atualizados com o estado da arte da tecnologia.

• Experiência prática comprovada com implementação e integração de modelos de linguagem em aplicações do mundo real – por exemplo, ter trabalhado com APIs de serviços como OpenAI, Azure/GCP AI, ou implantado modelos open-source (GPT-Neo, LLaMA ou similares) em ambiente de produção.

• Domínio de técnicas de prompt engineering: capacidade de escrever prompts eficazes para diferentes objetivos, ajustar o tom e estilo das respostas, usar instruções de sistema vs. usuário apropriadamente e aplicar estratégias como cadeia de raciocínio (chain-of-thought) para melhorar a qualidade das respostas do modelo.

• Familiaridade com ferramentas e frameworks voltados a LLM Ops, tais como bibliotecas de orquestração de prompts (LangChain, LlamaIndex etc.) e metodologias de avaliação de respostas de IA (uso de datasets de teste, métricas de similaridade, detecção de alucinações).

• Conhecimentos de avaliação de desempenho de modelos: saber configurar experimentos A/B, coletar feedback de usuários e medir melhorias ou regressões nas respostas do modelo de forma quantitativa.

• Habilidade de programar em linguagens comumente usadas em IA (Python etc.) para implementar pipelines de chamada aos modelos, processar resultados e integrar os outputs do LLM com o restante da plataforma (por exemplo, pós-processamento das respostas, chamadas a APIs adicionais).

• Entendimento de conceitos de observabilidade e segurança em IA: monitoração do uso dos modelos (logs de consultas e resultados), identificação de respostas inadequadas, e aplicação de filtros ou ajustes nos prompts para evitar vazamento de informações sensíveis ou viés indesejado.

• Boa base em Processamento de Linguagem Natural (PLN), entendendo limitações e capacidades de modelos de linguagem, e noções de como dados de treinamento ou ajustes finos podem impactar as respostas.

• Graduação em Ciência da Computação, Engenharia,Fisica, Estatística ou área relacionada (ou experiência profissional equivalente), com capacidade de ler artigos técnicos e aplicar novas técnicas de IA conforme necessário.

• Perfil analítico e metódico, com atenção a detalhes na formulação de prompts e análise crítica das respostas do modelo, além de boa comunicação para traduzir necessidades do produto em configurações técnicas de LLM.

Diferenciais Desejáveis:

• Experiência específica com chain-of-thought prompting e implementação de pipelines multi-etapas com LLMs (por exemplo, agentes que dividem tarefas complexas em etapas de raciocínio estruturado).

• Conhecimento de técnicas de fine-tuning de modelos de linguagem ou uso de RLHF (Reinforcement Learning from Human Feedback) para ajustar modelos customizados, mesmo que a ênfase atual seja em prompt engineering.

• Familiaridade com bases de conhecimento e bancos de vetores para fornecer contexto às respostas dos LLMs, bem como com técnicas de Retrieval-Augmented Generation (RAG) para melhoria da qualidade e atualidade das informações fornecidas pelos agentes.

• Vivência em projetos envolvendo avaliação humana de IA (human in the loop), elaboração de guidelines de resposta e moderação de conteúdo gerado por IA para alinhamento com políticas da empresa.

• Contribuições ou participação ativa em comunidades de IA (Kaggle, fóruns técnicos, projetos open-source), indicando paixão por manter-se atualizado(a) na área.

• Inglês avançado, dada a rápida evolução do campo de LLMs e a necessidade de acompanhar documentação e pesquisas internacionais em prompt engineering e NLP.

• Experiencia com framework do crewai.

Modelo de contratação: PJ 

Tipo de CNPJ/Empresa: ME (microempresa) ou LTDA (Empresa de Responsabilidade Limitada)

Cachê: Valor fixo em Nota Fiscal 

Com plano abrangente de benefícios:

💻 Notebook da empresa para quem está em SP, ou 💸 auxílio infraestrutura para garantia de internet e insumos para a realização do trabalho, para quem está fora de SP.

🤑13ª nota no ano;

🛫 Recesso de 30 dias + 1/3 (benefício adquirido após 1 ano de contrato);

🏥 Assistência Médica SulAmérica 

💚Seguro de Vida;

💳 VR por dia útil; (Cartão Flash; Crédito/Débito; podendo utilizar em redes com CNPJ de food (Exemplo: Restaurante;Mercado e Aplicativos)

📴 Day-off +crédito extra no cartão flash pelo dia do aniversário vitalício;

🦷 Assistência Odontológica SulAmérica - Plano opcional

🏋🏻Incentivo a prática de exercício físico - TotalPass

📚 Incentivo a educação - Reembolso mensal para cursos e treinamentos (segundo política)

✅Avaliações de performance semestrais com feedbacks e construção de PDI.

🪴Escritório moderno, preparado para atender a todos, com restaurante próprio em estilo bistrô.

Só um pouquinho de dados. Ou um montão deles.

A quantidade não é o mais importante, mas sim o uso que fazemos das informações. Na Just a Little Data, nosso papel é exatamente este: ajudar empresas - sejam elas multinacionais ou negócios locais - a potencializar o conhecimento por trás dos dados.

________________________________

Para isso, contamos não só com um time feito de especialistas em business, tecnologia, comunicação e outras áreas, mas com toda a estrutura e apoio do grupo B&Partners, do qual fazemos parte.

Queremos revolucionar o processo de tomada de decisão nas empresas e tornar a ciência de dados mais acessível, para que ela seja uma vantagem competitiva de negócios de diversos segmentos.

Nosso clima é de startup, com desafios, projetos e oportunidades de desenvolvimento constantes. Valorizamos a criatividade, unicidade de bagagem, bem estar e autonomia das pessoas que atuam conosco. Afinal, são elas que fazem a empresa, e não o contrário. Se curtiu a ideia de somar com a gente, veja nossas vagas em aberto - uma delas pode ser a sua cara. E o seu perfil, a nossa.

Bora se candidatar pra ver se vai dar match? 💚

Missão

Solucionar problemas e direcionar operações com tecnologia e ciência de dados da maneira mais prática e objetiva visando aumentar os resultados dos nossos clientes e parceiros.

Nossos valores

Inquietude: tudo sempre pode melhorar;

Conhecimento profundo do que faz;

Comprometimento e transparência nas relações (B2B e B2C);

Assertividade e precisão na entrega.

Diversidade

Aqui na Just, respeitar as identidades e valores de cada indivíduo não é só uma questão fundamental, mas obrigatória. Acreditamos que contar com pessoas de todos os tipos no nosso time é exatamente o que precisamos para nos desenvolver em todos os sentidos. Por isso, diferentes visões, bagagens e modos de ser são e serão sempre bem-vindos na nossa casa.

Como parte do grupo, somos signatário do Pacto Global da ONU, e lideramos dois importantes movimentos: Elas Lideram 2030 e Raça é Prioridade. Isso se traduz em metas claras: 50% de lideranças femininas e 50% de pessoas negras em posições de liderança, reforçando nosso compromisso com equidade real e contínua.

Somos uma empresa de tecnologia com um equilíbrio que nos orgulha!

Aqui, mulheres são maioria, provando que inovação e diversidade caminham juntas.

Bora somar e deixar os gráficos abaixo cada vez menos padronizados!

Nossa forma de trabalhar é híbrida, mais para remota.

Na Just, valorizamos o equilíbrio entre autonomia e alinhamento. Por isso, temos vagas remotas, híbridas e algumas que pedem presença em São Paulo, seja para encontros no escritório ou momentos conforme o escopo da vaga exigir. Mas não se preocupe, tudo isso é sinalizado de forma clara na descrição do cargo e ao longo do processo seletivo.

Se estiver em SP, conte com um espaço físico, moderno e bem equipado. Seja na sua casa ou na nossa, o que importa é se sentir bem no dia a dia! 🙌

Benefícios

A gente sabe que para ter os melhores talentos ao nosso lado, um bom salário não é a única coisa que importa. Por isso, preparamos um pacote de benefícios completo para oferecer mais bem estar e qualidade de vida para todo time da Just! Confira os principais 👇🏽  

Como avaliamos o ambiente de trabalho?