weightsapi.INFERENCJAKonsola
Nawigacja
Chatbot w dwudziestu linijkach

Chatbot w dwudziestu linijkach

Rozmowa w terminalu z użyciem wyłącznie standardowej biblioteki Pythona.

Wymagania#

Python 3.11 lub nowszy. Brak dodatkowych pakietów. Ustaw WEIGHTSAPI_API_KEY na własny klucz. Dostęp do AI wymaga zalogowania, jednego potwierdzonego doładowania co najmniej 100 USD, autoryzowanego klucza API i wystarczającego dostępnego kredytu na żądanie. Każde kolejne doładowanie również ma minimum 100 USD; mniejsze pozostałe salda pozostają użyteczne, gdy pokrywają żądanie. Kredyt wymaga weryfikacji transakcji. Sprawdź status usługi pod kątem dostępności modeli przed wysłaniem ruchu.

Uruchom przepis#

import os, json, urllib.request
BASE = os.environ.get("WEIGHTSAPI_BASE_URL", "https://weightsapi.com/v1")
KEY = os.environ["WEIGHTSAPI_API_KEY"]
def chat(messages, model="Qwen/Qwen3-32B", **options):
    payload = dict(model=model, messages=messages, max_tokens=512, **options)
    req = urllib.request.Request(BASE+"/chat/completions", json.dumps(payload).encode(),
        {"Authorization": "Bearer "+KEY, "Content-Type": "application/json"})
    with urllib.request.urlopen(req, timeout=120) as response:
        return json.load(response)
messages = [{"role": "system", "content": "Be concise and useful."}]
while True:
    text = input("You: ").strip()
    if text in ("exit", "quit"): break
    messages.append({"role": "user", "content": text})
    result = chat(messages)
    answer = result["choices"][0]["message"]
    messages.append(answer)
    print("Assistant:", answer["content"])

Przed produkcją#

Ogranicz współbieżność i ponowienia, waliduj dane wyjściowe i obsługuj błędy przed udostępnieniem przepływu pracy użytkownikom.