weightsapi.INFERENCJAKonsola
Nawigacja
Oszacuj zużycie przed migracją

Oszacuj zużycie przed migracją

Wybierz reprezentatywny tydzień i pogrupuj żądania według przepływu pracy. Zachowaj liczbę tokenów i czasy bez przechowywania wrażliwych treści w analityce.

Próbkuj rzeczywisty ruch#

Wybierz reprezentatywny tydzień i pogrupuj żądania według przepływu pracy. Zachowaj liczbę tokenów i czasy bez przechowywania wrażliwych treści w analityce.

Przeprowadź ograniczoną ewaluację#

Wyślij mały zatwierdzony zestaw testowy do kandydującego modelu. Porównaj skuteczność zadania, długość wyjścia, ponowienia i narzędzia. Tokenizacja różni się między dostawcami.

Budżetuj z niepewnością#

Oszacuj niski, oczekiwany i wysoki wolumen. Dodaj oczekiwane ponowienia i wzrost liczby tokenów wyjściowych. Ustaw budżety dla poszczególnych kluczy przed skierowaniem ruchu produkcyjnego.