weightsapi.INFERENCJAKonsola
Nawigacja
Agent wywołujący narzędzie

Agent wywołujący narzędzie

Ograniczone wywołanie funkcji z listy dozwolonych oraz odpowiedź uzupełniająca.

Wymagania#

Python 3.11 lub nowszy. Brak dodatkowych pakietów. Ustaw WEIGHTSAPI_API_KEY na własny klucz. Dostęp do AI wymaga zalogowania, jednego potwierdzonego doładowania co najmniej 100 USD, autoryzowanego klucza API i wystarczającego dostępnego kredytu na żądanie. Każde kolejne doładowanie również ma minimum 100 USD; mniejsze pozostałe salda pozostają użyteczne, gdy pokrywają żądanie. Kredyt wymaga weryfikacji transakcji. Sprawdź status usługi pod kątem dostępności modeli przed wysłaniem ruchu.

Uruchom przepis#

import os, json, urllib.request
BASE = os.environ.get("WEIGHTSAPI_BASE_URL", "https://weightsapi.com/v1")
KEY = os.environ["WEIGHTSAPI_API_KEY"]
def chat(messages, model="Qwen/Qwen3-32B", **options):
    payload = dict(model=model, messages=messages, max_tokens=512, **options)
    req = urllib.request.Request(BASE+"/chat/completions", json.dumps(payload).encode(),
        {"Authorization": "Bearer "+KEY, "Content-Type": "application/json"})
    with urllib.request.urlopen(req, timeout=120) as response:
        return json.load(response)
tools = [{"type":"function","function":{"name":"get_stock","description":"Look up product inventory.",
    "parameters":{"type":"object","properties":{"sku":{"type":"string"}},"required":["sku"],"additionalProperties":False}}}]
messages = [{"role":"user","content":"How many keyboards are in stock? SKU keyboard."}]
first = chat(messages, tools=tools)["choices"][0]["message"]
messages.append(first)
for call in first.get("tool_calls", []):
    if call["function"]["name"] != "get_stock": raise ValueError("Unknown tool")
    args = json.loads(call["function"]["arguments"])
    if set(args) != {"sku"} or not isinstance(args["sku"], str): raise ValueError("Invalid arguments")
    result = {"sku":args["sku"],"quantity":{"keyboard":12}.get(args["sku"],0)}
    messages.append({"role":"tool","tool_call_id":call["id"],"content":json.dumps(result)})
print(chat(messages)["choices"][0]["message"]["content"])

Przed wdrożeniem produkcyjnym#

Ogranicz współbieżność i ponowienia, waliduj dane wyjściowe i obsługuj błędy, zanim udostępnisz przepływ pracy użytkownikom.