Especialista em NLP e IA Generativa

Missão do cargo
Se você é apaixonado(a) por Tecnologia, é chato(a) com qualidade das entregas, mão não massa, e quer trabalhar em um ambiente dinâmico e colaborativo, essa oportunidade é para você! Procuramos por um(a) Especialista em IA talentoso(a), que pense fora da caixa. Será responsável por atuar no desenvolvimento de produtos baseados em Inteligência Artificial que utilizam NLP (Processamento de Linguagem Natural) e modelos de IA Generativa  - LLM (Large Language Model) / SLM (Small Language Model) para criar soluções inovadoras alinhadas com estratégia de produto e tecnologia da OneBox.
Responsabilidades do cargo

Desenvolver e implementar soluções de NLP, LLM e SLM.
Prototipação rápida de soluções de IA utilizando ferramentas lowcode/nocode como Flowise e N8N.
Criar e aprimorar os pipelines de processamento de linguagem natural utilizando Spacy e modelos de IA Generativa OpenSource e ClosedSource.
Integrar modelos de IA em novos produtos e soluções existentes, garantindo escalabilidade e eficiência.
Trabalhar em estreita colaboração com times de produto, engenharia e design.
Avaliar o desempenho dos modelos, ajustando e implementando melhorias contínuas utilizando métricas como acurácia, precisão e recall com base em matriz de confusão.
Realizar fine tuning em modelos OpenSource e ClosedSource de NLP, LLM e SLM.
Construção dos datasets para teste, treinamento, base de conhecimento (KB) e catalogos de referência/normalização.
Desenvolver e implementar um PDLC (Prompt development lifecycle).
Teste automatizado para análise de performance de LLMs / SLMs utilizando soluções como Promptfoo.
Desenvolver agentes de IA avançados utilizando LangChain, LangGraph, CrewAI e N8N, que possuam: memória de curto, memória de longo prazo, in-context learning e tools.
Implementar e acompanhar ferramentas de observabilidade e debug de IA Generativa como LangFuse.
Implementar soluções de data embedding, in-context learning (ICL) e retrieval augmented generation (RAG) junto as soluções de IA Generativa.


CI/CD para Modelos de IA - Desenvolver e implementar um processo de MLOps como foco em NLP e IA Generativa.


Implementar e operar ferramentas de data labeling como Prodigy e Label Studio para gerar dados para treinamento do Spacy.

Indicadores de desempenho

Performance dos modelos de NLP, LLM e SLM (acurácia, recall, precisão e eficiência computacional).
Performance dos prompts
Peformance das bases de conhecimento
Performance dos pipelines de extração de dados
Tempo de entrega de novas features relacionadas à IA.

Requisitos

Experiência comprovada mínima de 5 anos trabalhando no desenvolvimento de aplicações de IA, com foco em NLP e IA generativa em soluções de larga escala.


Experiência em usar LLM e SLMs em um contexto específico com uma base de conhecimento específica


Experiência como metodos de avaliação (Evaluation) de modelo de IA utilizando matriz de confusão e suas respectivas métricas.
Profundo conhecimento em Spacy e outros frameworks de NLP e NLU e arquitetura de modelos de linguagem natural.
Profundo conhecimento em NER (Named Entity Recognition) utilizando Spacy com normalização baseada em catalogos de dados.
Experiência com treinamento (fine-tuning) e deployment de modelos OpenSource e ClosedSource em produção.
Profundo conhecimento de Python aplicado para análise de dados, IA Generativa, NLP e NLU.


Conhecimento profundo em in-context learning, meta-Learning, text embedding e RAG.


Conhecimento de bibliotecas como Langchain, Llamaindex, LangGraph e CrewAI.
Conhecimento de ferramentas de LowCode / NoCode como N8N e Flowise.
Conhecimento de ferramentas de DataViz como Metabase e Superset.
Conhecimento de banco de dados de vetor (Vector DBs) como Pinecone, ChromaDB e PG Vector.
Familiaridade com desenvolvimento de produtos e integração de IA em soluções escaláveis.
Experiência com Ollama, LM Studio e Hugging Face.

Experiência com Lora, QLora e outras estratégias para menor consumo de memória.

Desenvolvimento de tools para trabalhar em conjunto com agentes de IA e LLM chains/pipelines.
Experiência com transformação, normalização e limpeza de dados.


Integração e Deploy: Conectar pipelines de LLMs, SLMs e NLP a sistemas de produção.



Qualificações necessárias



Especialista em NLP, LLMs e SLMs



Experiência prática com bibliotecas e frameworks como Spacy, LangChain, Llamaindex, LangGraph e CrewAI.

Ensino Médio Completo
Conhecimento em engenharia de prompts e técnicas de fine tuning para modelos de LLM e SLM OpenSource e ClosedSource.
Experiência com bancos de dados Postgres e manipulação de grandes volumes de dados textuais.
Domínio de linguagens como Python e ferramentas para processamento de dados.


Otimização de Código: Habilidade para criar scripts eficientes, usando práticas de profiling e paralelização.



Qualificações desejáveis

Experiência com cloud computing (AWS ou Huawei) e MLOps.
Conhecimento em arquitetura de APIs para integração de modelos de IA.
Participação ativa na comunidade de IA/NLP.
Inglês intermediário.
Conhecimento de OCRs OpenSource como Paddle, Tesserac e Kraken.

Competências necessárias

Prototipação rápida.
Pensamento analítico e solução de problemas complexos.
Capacidade de inovar e explorar novas abordagens tecnológicas.
Proatividade e autonomia na busca por melhorias contínuas.
Comunicação eficaz para colaborar com times multidisciplinares.
Habilidade para lidar com desafios de produto e impacto em negócios.

Candidatar