NMS - New Media Service GmbH
Technikerhände verkabeln einen Server für eigene KI-Modelle im Rack
Mit KI erzeugt

Self-Hosted KI & eigene Modelle

KI ohne Kontrollverlust: LibreChat auf Azure oder AWS, eigene Modelle wie Gemma oder Llama im Unternehmen betreiben und feinjustieren.

Termin vereinbaren

ISO 27001 · Microsoft Solution Partner

Generative KI nutzen, sensible Daten bleiben dabei in Ihrer eigenen Umgebung - im eigenen Cloud-Tenant oder auf eigener Hardware: Für Unternehmen mit hohen Datenschutzanforderungen, Berufsgeheimnisträger und regulierte Branchen ist Self-Hosting oft der einzige Weg, KI überhaupt produktiv einzusetzen. Er ist praktikabler, als viele denken.

Welches Problem löst Self-Hosted KI?

Public-Cloud-KI bedeutet immer: Ihre Eingaben verlassen das Unternehmen. Für viele Anwendungsfälle ist das mit Auftragsverarbeitung und richtiger Konfiguration vertretbar - für manche nicht. Patientendaten, Mandantendaten, Konstruktionsunterlagen, M&A-Dokumente: Wo der Abfluss von Informationen ein existenzielles Risiko wäre, braucht es eine KI-Umgebung unter eigener Kontrolle.

Self-Hosting heißt dabei nicht Verzicht: Moderne offene Modelle liefern für die meisten Unternehmensaufgaben - Zusammenfassen, Entwerfen, Recherchieren in eigenen Dokumenten - Ergebnisse auf hohem Niveau.

Was NMS bereitstellt

  • LibreChat als zentrale Oberfläche: Eine Chat-Umgebung für die ganze Belegschaft, betrieben in Ihrer Azure- oder AWS-Umgebung - mit Anmeldung über Ihr Microsoft-365-Konto, Rechte- und Kostensteuerung inklusive. Auf Wunsch mit Anschluss an mehrere Modelle gleichzeitig.
  • Eigene Modelle im Unternehmen: Offene Modelle wie Gemma oder Llama, dimensioniert für Ihre Arbeitslast - in Ihrer Cloud-Subscription oder auf eigener Hardware im Haus, eingebettet in Ihre hybride Infrastruktur.
  • Anbindung eigener Daten: Ihre Dokumente, Wikis und Ablagen werden durchsuchbar und zitierfähig - die KI antwortet mit Quellenangabe aus Ihrem Bestand statt aus dem Internet.
  • Feinjustierung und Training: Wo Standardmodelle nicht reichen, passen wir sie an Ihre Fachsprache und Aufgaben an - inklusive Schulung Ihres Teams für den laufenden Betrieb.
Die vier Bausteine einer eigenen KI-Umgebung
LibreChat als OberflächeChat-Umgebung in Ihrer Azure- oder AWS-Umgebung, Anmeldung über Microsoft 365.
Eigene Modelle im UnternehmenOffene Modelle wie Gemma oder Llama, in Ihrer Cloud oder auf eigener Hardware.
Anbindung eigener DatenDokumente und Wikis werden durchsuchbar, die Antwort nennt die Quelle.
Feinjustierung und TrainingAnpassung an Ihre Fachsprache, inklusive Schulung für den Betrieb.

Oberfläche, Modelle, eigene Daten und Feinjustierung: zusammen eine KI-Umgebung unter eigener Kontrolle, im eigenen Cloud-Tenant oder auf eigener Hardware.

Wie NMS vorgeht

  • Anforderungsanalyse: Welche Daten, welche Aufgaben, welches Schutzniveau? Daraus folgt die Architektur - von der reinen EU-Cloud-Lösung bis zur Umgebung ohne jede externe Verbindung.

  • Aufbau und Härtung: Infrastruktur, Modelle und Oberfläche werden aufgesetzt, abgesichert und in Ihr Monitoring integriert. Sicherheit nach ISO-27001-Standard ist bei NMS Grundausstattung.

  • Betrieb nach Maß: Ob Ihr Team selbst betreibt oder NMS als Managed Service übernimmt - beides ist möglich, auch im Mischmodell.

Für wen lohnt sich das?

Für Unternehmen mit sensiblen Daten (Gesundheit, Recht, Finanzen, Forschung und Entwicklung), für alle, die KI-Kosten planbar machen wollen, und für alle, denen die Abhängigkeit von einzelnen KI-Anbietern strategisch zu riskant ist. Ob sich der Weg für Sie rechnet, zeigt eine kurze Anforderungsanalyse - oft ist die Antwort ein Hybrid aus Public-Cloud-KI für Unkritisches und Self-Hosting für den sensiblen Kern.

Was ist LibreChat und warum setzt NMS darauf?

LibreChat ist eine quelloffene Chat-Oberfläche für KI-Modelle, die Sie in der eigenen Umgebung betreiben. Der Vorteil: eine einheitliche, vertraute Oberfläche für die Belegschaft, freie Modellwahl im Hintergrund und volle Kontrolle über Daten, Rechte und Kosten - ohne Anbieterbindung.

Sind selbst gehostete Modelle schlechter als ChatGPT oder Claude?

Die größten Spitzenmodelle laufen nicht lokal. Für typische Unternehmensaufgaben - Texte entwerfen, zusammenfassen, in eigenen Dokumenten recherchieren - liefern aktuelle offene Modelle jedoch sehr gute Ergebnisse. Entscheidend ist die Auswahl passend zur Aufgabe; wo mehr nötig ist, kombinieren wir kontrolliert mit Public-Cloud-Modellen.

Läuft Self-Hosted KI in der Cloud oder im eigenen Rechenzentrum?

Beides ist möglich. Häufigster Weg ist die eigene Azure- oder AWS-Subscription in einer EU-Region: volle Kontrolle bei flexibler Skalierung. Für höchste Anforderungen betreiben wir Modelle auch komplett auf Hardware im Haus - z. B. angebunden an unser Azure Datencenter-Konzept.

Ist Self-Hosted KI DSGVO-konform?

Self-Hosting ist die datenschutzfreundlichste Betriebsform: Eingaben und Dokumente bleiben in Ihrer Umgebung, es findet keine Übermittlung an Dritte statt. Die Konformität hängt dann von sauberer Konfiguration und Prozessen ab - genau dafür sorgt der Aufbau durch NMS.