All research
Pesquisa · Linhagem Better Router
Roteamento adaptativo sob qualidade, custo, latência e confiabilidade.
Um estudo reproduzível que pergunta se políticas aprendidas podem superar uma linha de base determinística ao escolher entre braços heterogêneos de LLM.
Abrir repositório de pesquisaStudy scope
O Better Router Adaptive compara quatro estratégias de roteamento em um dataset canônico derivado do RouterBench: um proxy de regras determinísticas, um preditor de utilidade XGBoost, um bandit contextual LinUCB e um oracle offline como limite superior.
Methods and protocol
Função de utilidade
Primary score balances quality, normalized cost, normalized latency, and error rate: U = 0.65Q − 0.20Cn − 0.10Ln − 0.05E.
Contrato de dados
Linhas canônicas por prompt_id e model_id com grupos de tarefa controlados, campos de proveniência e verificação SHA-256 do RouterBench antes de qualquer conversão pickle.
Disciplina de avaliação
Partições por prompt_id — nunca por vazamento de linhas — com regret, intervalos de confiança e artefatos gerados de execuções, não escritos à mão.
Publications and repositories
Publications and repositories
Evidence and status
Pesquisa · Linhagem Better Router
- Ainda não há conclusões empíricas sobre XGBoost ou LinUCB.
- As figuras do README usam um fixture sintético rotulado como demonstração — não evidência experimental final.
- O estudo permanece isolado do Better Router em produção até avaliação em sombra e revisão de privacidade.