Relatório de teste de Beam 1.0
Em 29 de out. de 2026, Beam 1.0 tem Spicy Index preliminar de 68,9. A liberdade não foi testada ou as evidências são insuficientes. O Index mantém a pontuação original de qualidade e capacidades, recebe a marca preliminar e continua no ranking. Evidência ausente não equivale a zero.
Cada ponto por trás das notas de Beam 1.0: a linha da tabela em que cada item caiu, onde perdeu pontos e cada teste de conteúdo com a data.
- Metodologia v3.3 →
- Notas calculadas em 29 de out. de 2026
- Ler a análise →
- Classificação: Modelos de linguagem →
Como o Spicy Index é composto
Como é pontuadoO Spicy Index combina 70% de qualidade e capacidades com 30% de um Freedom Score com evidências suficientes para publicação. Com evidências completas, os pesos são 59,5% de qualidade, 10,5% de capacidades e 30% de liberdade. Preço e velocidade são mostrados separadamente.
Comparação com o líder
13,6 pontos de Index atrás de Claude Opus 5.5. Modelos empatados em primeiro: 1.
| Dimensão | Beam 1.0 | Claude Opus 5.5 | Diferença ponderada |
|---|---|---|---|
| Rankings públicos | — | — | 0,0 |
| Roleplay | — | 76,3 | +15,1 |
| Escrita criativa | 62,9 | 71,0 | -12,7 |
| Seguimento de instruções | 85,0 | 100,0 | -16,3 |
| Memória em contexto longo | — | — | 0,0 |
| Capacidade | 40,0 | 65,0 | +0,8 |
| Freedom Score | — | 88,9 | +26,7 |
A liberdade não foi testada ou as evidências são insuficientes. O Index mantém a pontuação original de qualidade e capacidades, recebe a marca preliminar e continua no ranking. Evidência ausente não equivale a zero.
| Dimensão | Peso neste Index | Status | Nota |
|---|---|---|---|
| Rankings públicos | — | Pendente | — |
| Roleplay | — | Pendente | — |
| Escrita criativa | 42,5% | Pontuado | 62,9 |
| Seguimento de instruções | 42,5% | Pontuado | 85,0 |
| Memória em contexto longo | — | Pendente | — |
| Capacidade | 15% | Pontuado | 40,0 |
| Freedom Score | — | Ainda não testado | — |
Beam 1.0: Capacidade, linha por linha
Como é pontuadoCada item é lido da especificação do modelo na SpicyAPI e associado a uma linha de uma tabela fixa. Sem avaliação subjetiva.
40,0/ 1000 + 0 + 15 + 15 + 10 = 40 / 100
Da especificação pública do modelo na SpicyAPI, 29 de out. de 2026
| Item | Na SpicyAPI | Linha correspondente | Pontos | Pontos perdidos |
|---|---|---|---|---|
| Janela de contexto (publicada pelo criador)até 30 pts | Não informado | Não informadaMostrar a tabela completa
| 0,0 / 30 | −30,0 |
| Modalidades de entrada na SpicyAPIaté 25 pts | Só texto | Só textoMostrar a tabela completa
| 0,0 / 25 | −25,0 |
| Uso de ferramentasaté 15 pts | Ferramentas e tool_choice | Aceita ferramentas + Controle por tool_choiceMostrar a tabela completa
| 15,0 / 15 | Pontuação cheia |
| Saída estruturadaaté 15 pts | Aceito, aderência ao esquema verificada | response_format accepted + JSON-schema adherence verifiedMostrar a tabela completa
| 15,0 / 15 | Pontuação cheia |
| Controle de raciocínioaté 15 pts | 5 níveis: low · medium · high · xhigh · max | 5 níveisMostrar a tabela completa
| 10,0 / 15 | −5,0 |
Parcela dos pontos obtidos por item
Ainda não testado
Estas dimensões ainda não têm dados, por isso não entram no Index. Nenhuma é estimada.
Rankings públicos40% da qualidade
Ainda não testado
Notas do arena.ai, da Artificial Analysis e da Design Arena, só do modelo exato, cada uma convertida para 0–100 e ponderada na média.
Como é pontuadoRoleplay15% da qualidade
Ainda não testado
Consistência do personagem, imersão e ausência de sermão fora do personagem: 30 cenários × 3 amostras, pontuados às cegas por três LLMs juízes.
Como é pontuadoMemória em contexto longo15% da qualidade
Ainda não testado
Perguntas de recordação e de dois passos em 32k, 128k, 256k, 512k e 1M de tokens, dentro da janela publicada do modelo.
Como é pontuado
Testes de conteúdo de Beam 1.0, tarefa por tarefa
Como é pontuadoA nota da família é a média das tarefas, então uma única tarefa cautelosa puxa a família inteira para baixo. Veja de onde veio cada ponto.
Ainda não fizemos testes de conteúdo com este modelo, então ele não tem Freedom Score.
Quanto custa e quanto demora
Como é pontuadoMedido, nunca pontuado. O preço vem do catálogo ao vivo; a velocidade, de trabalhos reais dos últimos 30 dias.
- Preço
- $1.50 por 1 M de tokens mistos (3 de entrada : 1 de saída)
- Taxa de sucesso
- Ainda não publicado para nenhum modelo. As taxas de sucesso serão publicadas para todas as famílias ao mesmo tempo, depois de 30 dias de tráfego real.
- Velocidade de saída
- 217 tok/sInclui o tempo até o primeiro token
- Taxa de sucesso
- Coletando dados
Um tempo aparece quando há pelo menos 10 trabalhos concluídos. As taxas de sucesso contam só trabalhos de clientes e ficam ocultas para todos os modelos até completarmos 30 dias de tráfego.
Mais relatórios de teste de modelos de linguagem
- Relatório de teste de Gemini 3.5 Flash-LiteSpicy Index 69,7
- Relatório de teste de Claude Sonnet 4.6Spicy Index 67,3
- Relatório de teste de Mercury 3Spicy Index 71,8
- Relatório de teste de Gemini 2.5 FlashSpicy Index 71,9
- Relatório de teste de GLM 5.2Spicy Index 71,9
- Relatório de teste de Claude Sonnet 5Spicy Index 72,1
Objetivo e independente
A SpicyAPI vende acesso a este modelo. As notas vêm só das tabelas publicadas e dos registros de teste desta página. Preço, condições comerciais e acordos de fornecimento não têm nenhum papel.