A uniopen, plataforma digital e de assinaturas do grupo Uni-President Enterprises, mostrou como adaptou o Amazon Nova 2 Lite às suas políticas de moderação de conteúdo. O sistema precisa classificar cada interação em duas frentes: qual comportamento ocorreu, entre nove categorias, e a que tipo de assunto ele se refere: marca, outro ou proibido.
No fluxo descrito pela empresa, o modelo principal atende as solicitações de moderação, enquanto o Amazon Nova 2 Pro ajuda a gerar correções candidatas para erros reportados. Essas correções só entram no treinamento depois de revisão humana, para que exemplos gerados não sejam tratados como verdade automática.
A avaliação usou o mesmo conjunto de teste de 737 janelas de conversa para três versões: base, fine-tunada e fine-tunada com ajuste de prompt. Sem adaptação, o Nova 2 Lite marcou 0,5852 em Per Behavior Macro F1 e 0,4162 em Subject Type Macro F1. Com fine-tuning supervisionado e LoRA no Amazon SageMaker AI, os números subiram para 0,8364 e 0,8302. Depois, uma mudança no prompt para simplificar o formato de saída elevou as métricas para 0,8550 e 0,8491.
A postagem também detalha os controles usados para promover candidatos: testes de regressão obrigatórios, alertas quando há baixa confiança ou queda em uma classe, e aprovação humana quando um alerta aparece. O texto observa ainda que a disponibilidade do modelo varia por Região da AWS.