[Job - 30085] Senior Data Scientist (LLM), Brazil
Quick Summary
Qualidade e Avaliação de Modelos: Realizar curadoria de datasets especializados para avaliação de qualidade de agentes conversacionais,
Na CI&T , ajudamos grandes empresas a transformar o potencial da AI em impacto real nos negócios com AI Deployment, execução AI-native e tech-integrated business solutions.
Com 30 anos de experiência em transformação tecnológica, aceleramos inovação com expertise em agentic SDLC, application modernization, Data & AI, martech e business strategy.
Somos 8.000 CI&Ters em mais de 25 países, colaborando para construir soluções com impacto real. AI já faz parte da forma como trabalhamos, evoluímos e inovamos todos os dias.
Este profissional terá um papel fundamental na garantia da precisão, segurança e qualidade das respostas dos agentes de IA. A posição exige equilíbrio entre profundidade técnica em modelos de linguagem, visão estratégica de qualidade conversacional e capacidade de traduzir requisitos de negócio em políticas de segurança auditáveis.
Responsibilities
~1 min read-
Realizar curadoria de datasets especializados para avaliação de qualidade de agentes conversacionais, utilizando técnicas como LLM-as-judge e frameworks de avaliação de IA generativa
-
Monitorar e otimizar métricas de qualidade conversacional, incluindo First Contact Resolution (FCR), taxas de fallback e precisão de respostas
-
Conduzir testes A/B de prompts e modelos de linguagem para melhoria contínua da experiência conversacional
-
Otimizar o pipeline de voz (Speech-to-Text e Text-to-Speech) ajustando modelos para sotaques e terminologias específicas do setor de telecomunicações
-
Calibrar modelos de transcrição e síntese para reduzir latência e melhorar a naturalidade das interações
-
Definir e implementar políticas de segurança conversacional nos Guardrails, garantindo que as decisões automáticas dos agentes sejam auditáveis, éticas e alinhadas às diretrizes de negócio
-
Colaborar com equipes de governança para assegurar conformidade com regulamentações e melhores práticas de IA responsável
-
Desenvolver estratégias avançadas de prompt engineering para maximizar a precisão e a consistência das respostas dos modelos de linguagem
-
Realizar fine-tuning de modelos quando necessário para atender requisitos específicos de domínio e contexto de atendimento
-
Trabalhar de forma integrada com desenvolvedores, engenheiros de dados e arquitetos para garantir que a camada de inteligência esteja alinhada com a arquitetura técnica da solução
-
Comunicar resultados técnicos e recomendações de forma clara para stakeholders de negócio e liderança do cliente
Requirements
~1 min read-
Sólida experiência como Cientista de Dados
-
Experiência comprovada com modelos de linguagem de grande escala (LLMs) e processamento de linguagem natural (NLP)
-
Domínio de técnicas de avaliação de modelos de IA generativa, incluindo frameworks como RAG, G-Eval ou equivalentes
-
Proficiência avançada em Python, incluindo bibliotecas como Pandas, NumPy e Scikit-learn
-
Sólida base em estatística e probabilidade aplicada a problemas de machine learning
-
Experiência prática com plataformas de cloud computing (AWS, GCP, Azure ou Oracle Cloud Infrastructure)
-
Capacidade de traduzir requisitos de negócio em soluções técnicas mensuráveis e auditáveis
Nice to Have
~2 min read-
Experiência com Oracle Cloud Infrastructure (OCI) e seus serviços de IA generativa
-
Conhecimento prático de pipelines de Speech-to-Text e Text-to-Speech, especialmente com Whisper ou tecnologias equivalentes
-
Experiência com fine-tuning de modelos de linguagem (Llama, Cohere, GPT ou similares)
-
Familiaridade com configuração de NeMo Guardrails ou frameworks equivalentes de segurança conversacional
-
Experiência prévia em projetos de voz, contact center ou atendimento automatizado
-
Vivência no setor de telecomunicações ou indústrias com alto volume de interações com clientes
Location & Eligibility
Listing Details
- Posted
- June 26, 2026
- First seen
- June 26, 2026
- Last seen
- June 27, 2026
Posting Health
- Days active
- 0
- Repost count
- 0
- Trust Level
- 68%
- Scored at
- June 26, 2026
Signal breakdown
Please let Ciandt know you found this job on Jobera.
3 other jobs at Ciandt
View all →Explore open roles at Ciandt.
Similar Data Scientist jobs
View all →Stay ahead of the market
Get the latest job openings, salary trends, and hiring insights delivered to your inbox every week.
No spam. Unsubscribe at any time.