Installieren und konfigurieren Sie 9router auf einem VPS

Zentralisieren Sie Ihre LLM-Aufrufe mit einem selbstgehosteten KI-API-Proxy auf einem VPS. 9router-VPS ermöglicht es Ihnen, schnell einen Anwendungsrouter bereitzustellen, die Route der Anfragen zu wählen und Ihre Schlüssel an einem Ort zu behalten, ohne aufwendige Konfiguration. Entwickler, KI-Teams, DevOps und technische Startups können 9router starten, ihre Anwendungen verbinden und beginnen, mehrere Modelle von einer kontrollierten Ebene aus zu orchestrieren.
Image_UseCase_Webcloud_OptionBDD_2.jpeg

Ein KI-API-Router, kein Netzwerkrouter

Das Wort Router kann verwirrend sein. 9router ist weder eine WLAN-Box, noch ein Internet-Zugangsmodem, noch eine Marke für Netzwerk-Hardware. Es ist ein Software-Tool, das in Docker auf Ihrem 9router-VPS ausgeführt wird. Es empfängt die Anfragen Ihrer Anwendungen, fügt nützliche Informationen hinzu, wendet Ihre Regeln an und leitet den Datenverkehr dann an die konfigurierten Modell-APIs weiter. Sie behalten die Kontrolle über jede sensible Information: Zugangsdaten, Datenströme, Nutzungsparameter und Verbrauchslimits.

VPS-1

Ab

3,81 €

zzgl. MwSt./Monat

4,53 € inkl. MwSt./Monat

Spezifikationen:

2 vCores

4 GB RAM

40 GB SSD NVMe

1-tägige automatisierte Backups

VPS-2

Ab

7,21 €

zzgl. MwSt./Monat

8,58 € inkl. MwSt./Monat

Spezifikationen:

4 vCores

8 GB RAM

75 GB SSD NVMe

1-tägige automatisierte Backups

VPS-3

Ab

10,40 €

zzgl. MwSt./Monat

12,38 € inkl. MwSt./Monat

Spezifikationen:

6 vCores

12 GB RAM

100 GB SSD NVMe

1-tägige automatisierte Backups

VPS-4

Ab

19,96 €

zzgl. MwSt./Monat

23,75 € inkl. MwSt./Monat

Spezifikationen:

8 vCores

24 GB RAM

200 GB SSD NVMe

1-tägige automatisierte Backups

Warum 9router auf einem VPS hosten?

Ein VPS bietet eine isolierte, konfigurierbare und online verfügbare Umgebung, um 9router-VPS zu betreiben, ohne von einem lokalen Rechner abhängig zu sein. Sie kontrollieren den Anwendungspfad, die Systemregeln und die offenen Dienste, während Sie die notwendige Flexibilität behalten, um Ihre Konfiguration zu ändern. Der NVMe-SSD-Speicher hilft dabei, Protokolle, Konfigurationsdateien und Dienststatus schnell zu verarbeiten. Das Netzwerk des VPS unterstützt den API-Austausch mit einer Latenz, die für interaktive Anwendungen geeignet ist. Je nach Ihren technischen Anforderungen können Sie auch den Caveman-Modus aktivieren, anpassen oder deaktivieren, innerhalb eines von Ihrer Organisation definierten rechtmäßigen Nutzungsrahmens.

Steuern Sie Ihre LLM-Aufrufe von einem zentralen Punkt aus

Eine Eingangsschicht für Ihre KI-Anwendungen

Nach der Installation wird 9router zur Eingangsschicht für Ihre KI-Anwendungen. Ihr Dienst ruft nicht mehr direkt jeden LLM-Anbieter auf. Er sendet eine Anfrage an 9router, das Ihre Routing-Regeln anwendet, bevor die Anfrage an das gewählte Modell weitergeleitet wird. So können Sie die Aufrufe nach Aufgabenart, erwarteten Kosten, Verfügbarkeit oder den Präferenzen Ihres Teams organisieren.

Eine gemeinsame Schnittstelle für Ihre Integrationen

Diese Architektur vereinfacht den Kontakt zwischen Ihren Anwendungen und dem LLM-Ökosystem. Anstatt mehrere verstreute Integrationen zu pflegen, behalten Sie eine gemeinsame Schnittstelle bei. Anbieterwechsel, Parameteranpassungen oder Strategieänderungen werden auf der Seite des Software-Routers verwaltet, ohne dass jede verbundene Anwendung überarbeitet werden muss.

Eine weltweite VPS-Infrastruktur

Die VPS-Infrastruktur von OVHcloud basiert auf weltweiten Rechenzentren und einem Internetzugang, der für Online-Dienste konzipiert ist. Diese Basis hilft dabei, die Latenz zu kontrollieren, die Zugangskontinuität aufrechtzuerhalten und Ihre Dienste näher an die Bereiche zu bringen, in denen Ihre Nutzerinnen und Nutzer mit Ihren Tools interagieren.

Reduzierte technische Abhängigkeit

Das Routing reduziert zudem die Abhängigkeit von einem einzigen technischen Akteur. Wenn ein Modell für einen Anwendungsfall weniger geeignet wird, können Sie bestimmte Anfragen anderswohin leiten, ohne den Eingangspunkt auf Anwendungsseite zu ändern. Dieser Punkt ist wichtig für Teams, die Agenten, Assistenten oder Geschäftsdienste entwickeln, die regelmäßig weiterentwickelt werden sollen.

Nutzen Sie 9router mit einer soliden operativen Basis

9router lässt sich in OpenAI-API-Praktiken integrieren, um Änderungen auf Anwendungsseite zu begrenzen
Simple.svg
Kompatibilität mit OpenAI-API-Nutzungen
Network.svg
Netzwerksicherheit in der VPS-Umgebung enthalten
Gears Hand.svg
Geführter Start für technische Teams
Web App.svg
Web-, mobiler und zentralisierter Zugriff auf Modelle

Reduzieren Sie den Token-Verbrauch und steuern Sie Ihre Kontingente

Eine Optimierung der Anfragen

Die Kosten einer KI-Anwendung hängen nicht nur von der Anzahl der Nutzerinnen und Nutzer ab. Sie hängen auch von der Länge der Anfragen, den erwarteten Antworten und den wiederholten Aufrufen der Modelle ab. RTK Token Saver setzt genau hier an: Er optimiert oder komprimiert Anfragen vor dem Senden, um die verbrauchten Token zu reduzieren, wenn der Kontext dies zulässt.

Eine Steuerung der API-Kontingente

Diese Kontrolle wird nützlich, sobald mehrere Teams dieselbe öffentliche API oder mehrere Schlüssel gemeinsam nutzen. API-Kontingente bieten einen Rahmen: Sie helfen dabei, Überschreitungen zu vermeiden, die Aktivität zu glätten und Nutzungen zu identifizieren, die mehr verbrauchen als geplant. So können Sie einen stark beanspruchten internen Agenten, ein falsch konfiguriertes Business-Tool oder einen Anstieg aus Ihren Community-Netzwerken unterscheiden.

Vielfältige Anwendungsfälle

Die Anwendungsfälle sind vielfältig. Ein Support-Center kann redundante Prompts in assistierten Antworten reduzieren. Ein Produktteam kann die Aufrufe eines in seine Software integrierten Assistenten einschränken. Eine Community kann KI-Funktionen anbieten, ohne jeden Dienst unbegrenzt konsumieren zu lassen. Selbst bei Spielen oder interaktiven Erlebnissen verhindert die kontinuierliche Optimierung, dass häufige Interaktionen die Budgetkontrolle beeinträchtigen.

Eine Dokumentation der Regeln

Um diese Praktiken zu befolgen, kann Ihr Team auch seine Regeln dokumentieren, einen internen technischen Newsletter teilen und die Richtlinien gemäß den beobachteten Nutzungsrückmeldungen anpassen.

Häufig gestellte Fragen zu VPS 9router

Wie installiere ich 9router auf einem VPS?

Die Installation von 9router auf einem VPS erfordert eine manuelle Konfiguration. Bereiten Sie den VPS vor, installieren Sie bei Bedarf Docker und rufen Sie dann das 9router-Projekt oder dessen Image ab. Konfigurieren Sie die Umgebungsvariablen und API-Schlüssel, starten Sie den Dienst und testen Sie den Endpunkt vor jeder produktiven Nutzung mit einem geringen Anfragevolumen.

Bleiben meine API-Schlüssel vertraulich?

Ja, das Unternehmen behält die Kontrolle über seinen Server, seine Zugangsdaten und seine Multi-Provider-Routing-Regeln. Die Vertraulichkeit hängt auch von Ihren Praktiken ab: Einschränkung der SSH-Zugriffe, Rotation der Geheimnisse, Firewall, Überwachung und strikte Verwaltung der autorisierten Konten. 9router hilft dabei, die Verteilung von Schlüsseln auf mehrere Anwendungen zu vermeiden.

Funktioniert 9router mit OpenAI-kompatiblen APIs?

Ja. 9router stellt einen OpenAI-kompatiblen API-Endpunkt bereit, den Sie mit begrenzten Anpassungen in Ihren Anwendungen verwenden können. Sie zentralisieren auf diese Weise die Schlüssel, die verfügbaren Modelle und die Routing-Regeln zu mehreren Anbietern. Wir empfehlen Ihnen, die Konfiguration mit einem geringen Anfragevolumen zu validieren und die Nutzung vor der Inbetriebnahme schrittweise zu erweitern.

Hängt das mit Gaming-Routern zusammen?

Nein. Gaming-Router betreffen vor allem die lokale Verbindung, die Latenz im Heimnetzwerk oder die Priorisierung bestimmter Geräte. VPS 9router betrifft das API-Routing, die Schlüssel, die Kontingente und die Orchestrierung von KI-Modellen von einem gehosteten Server aus.