O que estes resultados demonstram
Data do teste: · Requisições locais dos clientes a um serviço HTTP simulado
Estas verificações existentes usaram configurações ou componentes reais dos clientes, uma chave fictícia e respostas simuladas fixas. Elas mostram quais IDs de modelos e campos de raciocínio os clientes testados enviaram. Não comprovam a disponibilidade dos fornecedores em produção nem a qualidade do raciocínio.
Ler o resumo datado das evidências (JSON) · Recursos dos modelos
Versões dos Agents e resultados
| Agent / versão | Caminho de execução | Resultado observado |
|---|---|---|
Claude Code2.1.309 | CLI nativa com o settings.json gerado; uma execução por modelo e nível de esforço. | 15 verificações de esforço explícito passaram, além de seis requisições com as configurações padrão dos modelos. Duas tentativas de Off enviaram high e falharam em aplicar a configuração solicitada. |
Codex0.154.0 | Leitura nativa da configuração pelo app-server e model/list; troca de modelo e esforço na mesma conversa. | 18 requisições capturadas: 17 configurações explícitas de esforço e a seleção padrão do MiniMax. |
OpenCode1.19.4 | CLI nativa; troca de modelo e variante na mesma sessão persistente. | 18 requisições capturadas: 17 configurações explícitas de esforço e a seleção padrão do MiniMax. |
Hermes0.0.0 | Snapshot de código-fonte gerenciado, sem uma versão de lançamento identificada. Carregamento real da configuração, interpretação do modelo e transporte pelo SDK da OpenAI. | 18 requisições capturadas: 17 configurações explícitas de esforço e a seleção padrão do MiniMax. |
DeepSeek Harness0.1.5-rc.1 | Configuração real do plugin llm-pi-ai e adaptador de streaming; o serviço hospedeiro do plugin foi simulado. | 18 requisições capturadas: 17 configurações explícitas de esforço e a seleção padrão do MiniMax. |
Pi0.85.1 | O ModelRuntime real carregou models.json e chamou completeSimple para cada modelo e nível de esforço. | 18 requisições capturadas: 17 configurações explícitas de esforço e a seleção padrão do MiniMax. |
OpenClaw2026.10.6 | Validador real de configuração, padrões de raciocínio e runtime HTTP. O Gateway de produção e a interface gráfica não foram iniciados. | 18 requisições capturadas: 17 configurações explícitas de esforço e a seleção padrão do MiniMax. |
IDs de modelos e campos de raciocínio capturados
Os valores abaixo são campos de requisição observados nas capturas salvas, sem garantia do comportamento dos modelos. none é o valor transmitido para Off; omitted significa que nenhum campo de esforço foi enviado. As tentativas de Off do Claude que falharam estão excluídas desta tabela e documentadas abaixo.
| ID do modelo na API | Claude Code | Codex | OpenCode | Hermes | DeepSeek Harness | Pi | OpenClaw |
|---|---|---|---|---|---|---|---|
glm-5.3-flash | low, high, max | low, high, max | low, high, max | low, high, max | low, high, max | low, high, max | low, high, max |
deepseek-flash | low, high, max | none, low, high, max | none, low, high, max | none, low, high, max | none, low, high, max | none, low, high, max | none, low, high, max |
kimi-k3 | low, high, max | low, high, max | low, high, max | low, high, max | low, high, max | low, high, max | low, high, max |
glm-5.3 | low, high, max | low, high, max | low, high, max | low, high, max | low, high, max | low, high, max | low, high, max |
minimax-m3.1 | omitted | none | omitted | omitted | omitted | omitted | omitted |
qwen3.8-max | low, medium, xhigh | none, low, medium, xhigh | none, low, medium, xhigh | none, low, medium, xhigh | none, low, medium, xhigh | none, low, medium, xhigh | none, low, medium, xhigh |
Limitações conhecidas
- Claude Code 2.1.309: as tentativas de Off para deepseek-flash e qwen3.8-max ainda enviaram high. Off não foi validado nesta versão do cliente; use os níveis de esforço positivos documentados.
- MiniMax M3.1: apenas raciocínio padrão. O Codex enviou none; os outros clientes testados omitiram o esforço. A correção local do gateway remove campos implícitos de raciocínio do cliente para este modelo. Estes registros não comprovam a implantação dessa correção nem uma rota M3.1 ativa no fornecedor.
- O Hermes era um snapshot de código-fonte gerenciado com versão de pacote 0.0.0, sem um lançamento verificado. O ambiente do OpenClaw usou Node 25, fora da faixa suportada por essa versão; use uma versão suportada do Node na implantação.
- Estes resultados não certificam interfaces Desktop, instalações Windows/Linux nem todas as versões posteriores dos clientes.
Cobertura de respostas e ferramentas
As evidências preservadas se concentram na leitura de configuração e nos campos de modelo/esforço enviados. Respostas comuns e streaming não foram validados separadamente contra um modelo de produção nesta auditoria. Uma resposta simulada ou verificação do adaptador de streaming não comprova a confiabilidade do streaming em produção.
A execução de ferramentas, o acesso a arquivos e os ciclos completos de chamadas de ferramentas não foram comprovados por estas capturas. Não há afirmação de benchmark de latência, taxa de sucesso ou concorrência em produção.
A regressão local do gateway usou LiteLLM 1.92.0: 60 casos de conversão de protocolos, com 84 testes e 53 subtestes na suíte registrada do gateway. Trata-se de evidência de regressão de protocolo, sem uma execução adicional de cliente em produção.
Evidências e método
Esta página republica a auditoria existente de 23/10/2026; não relata uma nova rodada de testes. O JSON contém os IDs de modelos, caminhos de protocolo, campos de esforço e configurações selecionadas do Claude preservados, além dos nomes dos arquivos originais e resumos SHA-256. Chaves, prompts, caminhos locais e payloads completos não estão incluídos.
Para repetir o método, carregue a configuração do Agent correspondente com uma chave fictícia e um endpoint local simulado, alterne cada modelo e esforço e compare os campos capturados. Respostas reais, streaming e execução de ferramentas exigem verificações separadas na implantação de destino.
Ler o resumo datado das evidências (JSON) · Solução de problemas · Guias de configuração