Eine private KI-Plattform
für Ihr Unternehmen

Hardware, Modelle, Assistenten, Anbindungen und Betrieb aus einer Hand. Alles läuft in Ihrem Perimeter, damit Verträge, Code und Kundendaten nicht zu externen KI-Diensten gelangen.

Angebot anfragen

Woraus die Plattform besteht

Wählen Sie eine Schicht, um zu sehen, was enthalten ist.

Ihr Perimeter

Assistenten

Womit Ihre Mitarbeitenden täglich arbeiten.

  • Suche und Antworten in internen Dokumenten, mit Quelle und Seite
  • Ein Assistent für jede Abteilung
  • Agenten, die Routineabläufe durchgängig automatisieren

Was Ihre Mitarbeitenden sehen

Rechtsassistent

Welche Kündigungsfrist gilt im Rahmenvertrag mit der Müller GmbH?

Drei Monate zum Quartalsende, in Schriftform (§ 14.2). Ohne Kündigung verlängert sich der Vertrag um 12 Monate (§ 14.3).

  • Rahmenvertrag Müller 2024.pdf, S. 9
  • Nachtrag 02.pdf, S. 2
Beantwortet auf Ihrem Server. An externe Dienste gesendet: nichts.

Anschauungsbeispiel: Firmen, Dokumente und Antworten sind erfunden.

Wohin eine Anfrage geht

Externer KI-Dienst

Ihr Perimeter
MitarbeiterFirmennetz
Externer KI-Dienst

Die Anfrage und angehängte Dokumente verlassen Ihr Unternehmen und werden von einem Dritten verarbeitet.

Ihre Plattform

Ihr Perimeter
MitarbeiterAssistenten und APIModelle auf GPU-ServernIhre Dokumente
Externer KI-DienstNicht genutzt

Die Anfrage wird in Ihrem Perimeter beantwortet. Nichts wird nach außen gesendet.

Wo sie läuft

In allen drei installieren und betreiben wir dieselbe Plattform.

Ihre HardwareGemietet in der EUBeides
Server gehörenIhnenDem Rechenzentrumsbetreiber; sie sind für Sie reserviertTeils Ihnen, teils gemietet
StandortIhren RäumenEinem EU-RechenzentrumAn beiden Orten
KostenAnschaffung, dann BetriebskostenMiete, kein KaufEine Mischung aus beidem
Abrechnung pro AnfrageKeineKeineKeine
Passt, wennDatenregeln streng sind und die Last gleichmäßig istSie ohne Hardwarekauf starten wollen oder sich die Last ändern kannEin Teil der Last bei Ihnen bleibt und ein Teil auf gemieteter Kapazität läuft

Wie viel Hardware Sie brauchen

Hauptaufgabe
ModellLlama 3.3 70B
Gleichzeitige Anfragen in der Spitze10
Benötigter GPU-Speicher≈ 92 GB
GPUs, grobe Schätzung2 × H100 80 GB oder gleichwertig
Server (je bis zu 8 GPUs)1

Eine Schätzung zur Orientierung, ausgehend von GPUs der H100-Klasse und typischer Nutzung. Genau dimensionieren wir in der Analyse, mit Ihren Daten und Ihren Spitzen.

Wie ein Projekt abläuft

  1. Analyse und Architektur

    Anwendungsfälle, Volumen, Sicherheits- und DSGVO-Anforderungen. Wir wählen die Modelle und dimensionieren die GPUs.

    Sie erhaltenArchitektur und Dimensionierung

  2. Bereitstellung

    GPU-Cluster, Inferenz offener Modelle, eine API für Ihre Systeme, rollenbasierter Zugriff und Single Sign-on.

    Sie erhaltenEinen laufenden Cluster mit API und Login

  3. Ihr Wissen

    Suche und Antworten auf Basis interner Dokumente, Assistenten für Fachabteilungen, Anbindung an CRM, E-Mail und Wissensdatenbanken.

    Sie erhaltenAssistenten, angebunden an Ihre Dokumente

  4. Feinabstimmung und Agenten

    Modelle, angepasst an Ihre Terminologie und Prozesse; Routineabläufe durchgängig automatisiert.

    Sie erhaltenModelle, die Ihre Sprache sprechen

  5. Betrieb

    Monitoring, Modell-Updates, Protokollierung, Qualitäts- und Kostenkontrolle.

    Sie erhaltenEine Plattform, die weiterläuft

Angebot anfragen

Beschreiben Sie Ihre Anwendungsfälle, wie viele Personen die Plattform nutzen werden und mit welchen Daten sie arbeitet.

Wir verwenden Ihre Angaben ausschließlich zur Beantwortung Ihrer Anfrage. Datenschutzerklärung

Oder schreiben Sie uns direkt: [email protected]