OpenAI-yhteensopiva API-pika-aloitus

Edellytykset ja ympäristön määritys

Tarvitset API-avaimen ja oikean base URL:n yhdistääksesi asiakasohjelmistosi. Rekisteröidy Google- tai sähköpostilla Get API key -sivulla saadaksesi kirjautumistietosi välittömästi. Kokeilukrediitti antaa sinulle $0.50 seitsemäksi päiväksi, ja voit täydentää saldoa USDT- tai USDC-kryptovaluutoilla. Pidä avain turvassa ja varmista, että se vastaa tilisi asetuksia.

Varmista, että ympäristösi tukee yleisiä HTTP-pyyntöjä. Palvelumme käyttää yhtä uncensored-mallia, joten sinun ei tarvitse hallita useita mallien päätepisteitä. Aseta base URL -arvoksi HTTPS://api.openaiapicompatibility.com/v1 ennen kuin teet pyyntöjä. Tämä varmistaa, että kaikki pyynnät ohjautuvat oikein säädettyihin johtoservereihin.

Virallisen OpenAI-SDK:n asennus

Käytä virallisia SDK:ta säilyttääksesi yhteensopivuuden olemassa olevien OpenAI-työvuorojen kanssa. Python- ja Node-kirjastot toimivat suoraan päätepisteemme kanssa, koska noudatamme standardia API-kaaviota. Asenna paketti projektihakemistoosi haluamallasi paketinhallintajärjestelmällä. Tämä lähestymistapa välttää tarpeen mukautetulle HTTP-asiakasohjelmakoodille.

Tukeemme vakioita parametreja kuten temperature, top_p ja stop-jonot. SDK hoitaa JSON-sarjallistuksen ja pyyntöotsikot automaattisesti. Voit vaihtaa base URL:n asiakasasetuksissa osoittamaan palvelimillemme. Tämä mahdollistaa toimittajien vaihdon ilman sovelluslogiikan muutoksia.

Perus-URL-osoitteen ja API-avaimen määrittäminen

Aseta perus-URL ja API-avain asiakaskonfiguraatioobjektiisi. Perus-URL on HTTPS://api.openaiapicompatibility.com/v1. Välitä API-avauksesi Authorization-otsikkona Bearer-tokenina. Tämä konfiguraatio varmistaa, että pyyntösi todennetaan ja ohjataan oikealle palvelulle.

Copycurl https://api.openaiapicompatibility.com/v1/chat/completions \
  -H "Authorization: Bearer $API_KEY" \
  -H "Content-Type: application/json" \
  -d '{
    "model": "uncensored",
    "messages": [{"role": "user", "content": "list all python packages for data science"}]
  }'

Varmista yhteys kutsumalla GET /v1/models -päätepistettä. Tämä palauttaa luettelon saatavilla olevista malleista, mukaan lukien uncensored-mallin tunnus. Käytä tätä vaihetta vahvistaaksesi, että verkon yhteys ja kirjautumistiedot ovat oikein ennen monimutkaisten promptien lähettämistä.

Ensimmäisen chat-päättelypyynnön tekeminen

Lähetä POST-pyyntö osoitteeseen /v1/chat/completions prompt-viestisi kera. Määrittele malli arvoksi uncensored päästäksesi suodattamattomaan johtopäätösmoottoriin. Sisällytä system-promptisi asettaaksesi käyttäytymisen ja lisää käyttäjän viestit luotavaksi sisällölle.

Copyfrom openai import OpenAI

client = OpenAI(base_url="https://api.openaiapicompatibility.com/v1", api_key="YOUR_KEY")

resp = client.chat.completions.create(
    model="uncensored",
    messages=[{"role": "user", "content": "Summarise this thread without softening it."}],
)
print(resp.choices[0].message.content)

Vastaus sisältää luodun tekstin ja token-käystilastot. Voit säätää parametreja kuten lämpötilaa ohjataksesi luovuutta. Malli ei hylkää laillisia aikuisille tarkoitettuja tai kiistanalaisia aiheita, mikä tekee siitä soveltuvan monenlaisiin käyttötarkoituksiin. Tarkista vastausolio content-kentän löytämiseksi tuloste.

Streamausvastaukset SSE:n kanssa

Ota käyttöön streamaus asettamalla stream-parametri arvoksi true pyynnössä. Tämä lähettää osittaisia vastauksia Server-Sent Events -tapahtumina (SSE). Se parantaa käyttäjäkokemusta näyttämällä tekstiä sen tuotannon aikana.

Copystream = client.chat.completions.create(
    model="uncensored",
    messages=[{"role": "user", "content": "Tell the story in second person."}],
    stream=True,
)
for chunk in stream:
    if chunk.choices and chunk.choices[0].delta.content:
        print(chunk.choices[0].delta.content, end="", flush=True)

Jokainen lohko sisältää vastauksen deltaa. Kumuloi nämä delta-arvot重建 koko teksti. Viimeinen lohko sisältää pyynnön kokonaistokenkäytön. Tämä menetelmä toimii minkä tahansa standardin SSE-asiakkaan tai kirjaston kanssa. Se vähentää havaittua viivettä pitkän sisällön generoinnissa.

JSON-tilan ja funktion kutsumisen yhdistäminen

Käytä JSON-tilaa asettamalla response_format arvoksi json_object. Tämä pakottaa mallin tuottamaan kelvollisen JSON-tiedoston vapaan tekstin sijaan. Se on hyödyllinen rakenteellisen datan erotteluun tai API-vastauksiin. Yhdistä tämä funktiokutsuihin työkalukäyttötapauksissa.

Määritä työkalut tools-taulukkoon. Määritä funktion nimi, kuvaus ja parametrit. Malli palauttaa funktion kutsumisen yksityiskohdat vastauksessa. Voit sitten suorittaa funktion ja palauttaa tuloksen takaisin mallille. Tämä mahdollistaa monivaiheiset työvuorot uncensored-mallin kanssa.

Node.js

Copyimport OpenAI from "openai";

const client = new OpenAI({ baseURL: "https://api.openaiapicompatibility.com/v1", apiKey: process.env.API_KEY });

const resp = await client.chat.completions.create({
  model: "uncensored",
  messages: [{ role: "user", content: "Draft a villain monologue for my game." }],
});
console.log(resp.choices[0].message.content);