Configuratie
ConfiguratieGebruik van een zelf-gehoste LLM

Gebruik van een zelf-gehoste LLM

Je kunt een zelf-gehoste LLM gebruiken (bijv. via Ollama) om inhoud te vertalen.

Ga naar de Instellingenpagina bij Service Configuration > Self-hosted LLM en configureer de waarden.

InstellingBeschrijving
Endpoint URLHTTP-endpoint-URL voor je zelf-gehoste LLM-model. Zie de voorbeelden hieronder.
Compatible with API endpoint fromMet welke AI-serviceprovider je aangepaste endpoint compatibel is: ChatGPT of Claude.
ModelNaam van het zelf-gehoste LLM-model dat gebruikt wordt bij het vertalen van inhoud.
Max tokensMaximum aantal tokens dat het model in de respons kan genereren. Laat leeg voor geen limiet (ChatGPT) of gebruik de standaardwaarde voor Claude.

Voorbeelden van Endpoint URL:

URLBeschrijving
http://localhost:11434/v1/chat/completionsChatGPT-formaat, Ollama op je server
http://localhost:11434/v1/messagesClaude-formaat, Ollama op je server
https://ollama.com/v1/chat/completionsChatGPT-formaat, Ollama Cloud
https://ollama.com/v1/messagesClaude-formaat, Ollama Cloud
Een zelf-gehoste LLM configureren in de Instellingen
Een zelf-gehoste LLM configureren in de Instellingen

Als je de LLM op je eigen server host, heb je geen API-sleutel nodig.

Als je je zelf-gehoste LLM in de cloud gebruikt (bijv. met Ollama Cloud), moet je mogelijk een API-sleutel opgeven via het tabblad API Keys > Self-hosted LLM op de Instellingenpagina.

De API-sleutel opgeven voor een zelf-gehoste LLM in de Instellingen
De API-sleutel opgeven voor een zelf-gehoste LLM in de Instellingen