Large Language Model (LLM)

Ein Large Language Model (LLM, deutsch großes Sprachmodell) ist ein KI-Modell, das mit sehr großen Textmengen trainiert wurde und Sprache verstehen und erzeugen kann. Bekannte Modellfamilien sind etwa Claude von Anthropic und GPT von OpenAI.

Wie ein Sprachmodell funktioniert

Ein LLM zerlegt Text in Tokens, das sind Wörter oder Wortteile. Beim Training lernt das Modell an riesigen Textmengen, welches Token in welchem Zusammenhang folgt. Dabei legt es im Wesentlichen keine Texte ab, sondern statistische Muster in Milliarden von Parametern. Beim Antworten erzeugt es Token für Token eine wahrscheinliche Fortsetzung zur Eingabe, dem sogenannten Prompt.

Die meisten heutigen LLMs basieren auf der Transformer-Architektur. Nach dem Grundtraining werden sie mit Beispielaufgaben und Bewertungen nachtrainiert, häufig auch mit Rückmeldungen von Menschen, damit sie Anweisungen befolgen und hilfreich antworten. Neuere Modelle verarbeiten neben Text auch Bilder und können über Schnittstellen Werkzeuge aufrufen.

Stärken und Grenzen

LLMs sind stark darin, Texte zusammenzufassen, umzuformulieren, zu übersetzen und unstrukturierte Inhalte wie E-Mails oder Dokumente einzuordnen. Auch beim Programmieren und beim Auswerten langer Dokumente nehmen sie viel Arbeit ab.

Die wichtigste Grenze: Ein LLM kann Aussagen erfinden, die überzeugend klingen, aber falsch sind. Man spricht von Halluzinationen. Außerdem kennt ein Modell nur den Wissensstand seines Trainings und nichts über dein Unternehmen, solange du ihm diese Informationen nicht mitgibst. Genau hier setzen Verfahren wie RAG an, die dem Modell passende Dokumente bereitstellen.

Worauf Unternehmen achten sollten

Für den Einsatz im Betrieb zählen weniger Ranglisten als praktische Fragen. Wo werden die Daten verarbeitet, und werden Eingaben zum Training verwendet? Für Geschäftskunden bieten die großen Anbieter eigene Tarife und Verträge zur Auftragsverarbeitung an. Die rechtliche Prüfung im Einzelfall ersetzt das nicht.

Außerdem unterscheiden sich Modelle bei Kosten und Geschwindigkeit deutlich. Für viele Aufgaben reicht ein kleineres, günstigeres Modell, ein großes lohnt sich dort, wo komplexe Zusammenhänge verstanden werden müssen. Wir testen Modelle deshalb mit echten Beispielen aus dem jeweiligen Ablauf, bevor wir uns festlegen.

Beispiel: Angenommen, in einem Sammelpostfach landen Anfragen und Reklamationen durcheinander. Ein LLM ordnet jede E-Mail einer Kategorie zu und zieht die wichtigsten Angaben heraus, etwa Kundennummer und Anliegen. Eine Automatisierung leitet die E-Mail danach an das zuständige Team weiter. Das Modell übernimmt die Einordnung, die Entscheidungen trifft weiterhin das Team.

Häufige Fragen

Was ist der Unterschied zwischen einem LLM und ChatGPT?

ChatGPT ist eine Anwendung des Unternehmens OpenAI, in der Sprachmodelle aus der GPT-Familie arbeiten. Das LLM ist das eigentliche Modell dahinter. Dieselben Modelle lassen sich auch über eine API in eigene Software einbinden.

Warum erfindet ein LLM manchmal Fakten?

Ein LLM erzeugt eine wahrscheinliche Fortsetzung eines Textes und prüft dabei nicht von selbst, ob eine Aussage stimmt. Fehlen ihm Informationen, füllt es die Lücke mit plausibel klingendem Text. Abhilfe schaffen mitgegebene Quellen, etwa per RAG, und die Prüfung wichtiger Ergebnisse durch einen Menschen.

Kann man ein LLM auf eigenen Servern betreiben?

Ja, es gibt Modelle mit frei verfügbaren Gewichten, die sich lokal oder bei einem Hoster deiner Wahl betreiben lassen. Das gibt mehr Kontrolle über die Daten, erfordert aber passende Hardware und laufende Wartung. Viele der leistungsstärksten Modelle gibt es allerdings nur über die Cloud-Dienste ihrer Anbieter.

    • Software

    CRM

    Software, in der ein Unternehmen Kontakte, Anfragen, Angebote und den Austausch mit Kunden zentral speichert.

    • Software

    Webhook

    Eine automatische Nachricht, die ein System an eine hinterlegte Adresse schickt, sobald ein bestimmtes Ereignis eintritt.

    • Software

    Workflow-Automati­sierung

    Software erledigt wiederkehrende Arbeitsabläufe nach festen Regeln, ohne dass jemand eingreifen muss.

Kostenlose Potenzialanalyse

In 20 Minuten am Telefon schauen wir uns an, wo bei dir Anfragen, Zeit oder Geld verloren gehen und was sich zuerst lohnt. Unverbindlich und ohne Verkaufsshow.

  1. 1Formular ausfüllen, dauert eine Minute
  2. 2Wir rufen dich innerhalb weniger Stunden zurück
  3. 320 Minuten Analyse, danach weißt du, was sich lohnt

Wir rufen dich innerhalb weniger Stunden zurück (Mo-Sa 9⁠-⁠18 Uhr). Kein Newsletter, keine Weitergabe.

Anrufen WhatsApp Potenzialanalyse