All research
Badania · Linia Better Router
Adaptacyjny routing pod kątem jakości, kosztu, opóźnienia i niezawodności.
Powtarzalne badanie sprawdzające, czy wyuczone polityki mogą przewyższyć deterministyczną linię bazową w stylu Better Router przy wyborze między heterogenicznymi ramionami LLM.
Otwarte repozytorium badawczeStudy scope
Better Router Adaptive porównuje cztery strategie routingu na kanonicznym zbiorze pochodnym z RouterBench: deterministyczny proxy reguł, predyktor użyteczności XGBoost, kontekstowy bandit LinUCB i offline oracle jako górna granica.
Methods and protocol
Funkcja użyteczności
Primary score balances quality, normalized cost, normalized latency, and error rate: U = 0.65Q − 0.20Cn − 0.10Ln − 0.05E.
Kontrakt danych
Kanoniczne wiersze po prompt_id i model_id z kontrolowanymi grupami zadań, polami pochodzenia i weryfikacją RouterBench SHA-256 przed konwersją pickle.
Dyscyplina ewaluacji
Podziały po prompt_id—nigdy przez wyciek wierszy—z regret, przedziałami ufności i artefaktami z przebiegów, a nie ręcznie pisanymi wynikami.
Publications and repositories
Publications and repositories
Evidence and status
Badania · Linia Better Router
- Nie przedstawiono jeszcze empirycznych wniosków o XGBoost ani LinUCB.
- Figury README używają syntetycznego fixture oznaczonego jako demonstracja—to nie ostateczny dowód eksperymentalny.
- Badanie pozostaje odizolowane od produkcyjnego Better Router do shadow evaluation i przeglądu prywatności.