Primeira páginaDiário da IA
Para quem programa

Hugging Face publica guia para executar e ajustar o modelo Beam, da Reflection

A Hugging Face detalhou como usar o Beam, modelo aberto de texto da Reflection voltado a programação e tarefas com agentes. O guia inclui opções de execução e receitas de ajuste.

Hugging Face publica guia para executar e ajustar o modelo Beam, da Reflection
Imagem: reprodução · Hugging Face

A Hugging Face publicou um guia sobre o Beam, modelo de texto aberto da Reflection voltado a programação, raciocínio com contexto longo e tarefas com agentes. A publicação mostra como executá-lo, ajustá-lo e implantá-lo com Transformers, SGLang e vLLM. O modelo aceita contextos de até 1 milhão de tokens e pode ser personalizado para diferentes usos.

O Beam tem 501 bilhões de parâmetros, mas ativa oito dos 256 especialistas para cada token. Segundo a publicação, calcula cada token com cerca de 23 bilhões de parâmetros, embora a implantação ainda precise manter os especialistas na memória. O arquivo em BF16 ocupa cerca de 1 TB; a versão NVFP4, voltada a GPUs NVIDIA Blackwell, reduz o tamanho para cerca de 280 GB. A Hugging Face também indica versões FP8 para GPUs mais antigas que Blackwell.

O modelo está disponível nos provedores de inferência da Hugging Face, com infraestrutura de Baseten, Fireworks e Together. Em um teste próprio de aderência ao idioma solicitado, após ajuste, respondeu no idioma pedido em 16 de 16 prompts reservados, contra 3 de 16 no modelo-base. A avaliação mediu a escolha do idioma, não a correção do raciocínio.

O que muda para você

Desenvolvedores já podem testar o Beam pelos provedores de inferência da Hugging Face ou implantá-lo com Transformers, SGLang e vLLM. Executá-lo em infraestrutura própria exige memória para os pesos de um modelo de 501 bilhões de parâmetros; a necessidade varia conforme a precisão e o hardware. A publicação é um guia técnico, não um aplicativo novo para uso direto por quem não desenvolve sistemas.

Minha leitura

O guia deixa claro que ter acesso ao modelo aberto não significa conseguir executá-lo em qualquer máquina. A versão NVFP4 reduz o espaço dos pesos, mas depende de GPUs Blackwell; outras configurações também exigem várias GPUs. Para uma equipe, o critério prático é comparar o custo de testar por um provedor com a necessidade de controlar e ajustar o modelo na própria infraestrutura. As avaliações publicadas ajudam a explorar casos específicos, mas não demonstram desempenho geral.

Thiago FelizolaConsultor de IA, curador do Diário da IA

Primeira páginaArquivo de notícias