
Was ist ein Knowledge Graph – und warum reden gerade alle darüber?
TL;DR: „Ein Knowledge Graph speichert Wissen nicht als Dokument, sondern als Netz aus Entitäten und Beziehungen. Für LLMs ist er das fehlende Stück zwischen 'klingt plausibel' und 'ist nachweislich korrekt' – deshalb wird er gerade zur Standard-Infrastruktur für AI Agents."
— Till FreitagWorum es geht
Seit GraphRAG, Palantir-Ontologien und den jüngsten Agent-Plattformen taucht der Begriff Knowledge Graph in fast jedem AI-Pitch auf. Gleichzeitig kann kaum jemand klar sagen, was ihn von einer Datenbank, einem Vector Store oder einem Data Warehouse unterscheidet – und warum man ihn überhaupt braucht.
Dieser Artikel ordnet ein: Was ein Knowledge Graph technisch ist, warum LLMs ihn lieben, und wann ihr selbst einen aufbauen solltet.
Die Kurzdefinition
Ein Knowledge Graph speichert Wissen als Netzwerk:
- Entitäten (Knoten): Personen, Firmen, Produkte, Verträge, Tickets
- Beziehungen (Kanten): „arbeitet bei", „ist Teil von", „referenziert", „verursacht"
- Attribute: Eigenschaften der Knoten und Kanten (Datum, Status, Quelle)
Statt „Daten in Tabellen" oder „Texte in Dokumenten" erhält man ein durchsuchbares, traversierbares Modell der Realität – mit expliziten Bedeutungen statt impliziter Spalten.
Faustregel: Wenn ihr „JOIN über fünf Tabellen plus drei PDFs" denkt, ist das im Graphen ein einziger Traversal-Hop.
Warum jetzt? Drei Treiber
1. LLMs brauchen verlässlichen Kontext
Vector-RAG ist gut für „finde mir ähnliche Textstellen". Aber sobald die Frage mehrstufig wird („Welche Kunden von Account-Manager X haben in den letzten 12 Monaten Tickets zu Feature Y eröffnet?"), bricht der naive Retrieval-Ansatz zusammen. Ein Graph liefert genau diese Multi-Hop-Antworten deterministisch.
2. Agenten brauchen ein Weltmodell
Ein AI-Agent, der Aktionen ausführt, muss verstehen, was womit zusammenhängt. Ohne Graph hangelt er sich von Tool zu Tool und verliert den Kontext. Mit Graph hat er eine persistente Karte der Domain – inklusive Berechtigungen, Quellen und Aktualität.
3. Compliance & Nachvollziehbarkeit
Jede Kante kann mit Quelle, Zeitstempel und Confidence versehen werden. Das macht auditierbare KI überhaupt erst möglich – ein Pflichtthema im Enterprise-Kontext (EU AI Act, SOC 2, ISO 42001).
Knowledge Graph vs. die üblichen Verdächtigen
| Vector Store | Data Warehouse | Knowledge Graph | |
|---|---|---|---|
| Datenmodell | Embeddings | Tabellen / Sterne | Knoten + Kanten |
| Stärke | semantische Ähnlichkeit | Aggregation, BI | Beziehungen, Multi-Hop |
| Schwäche | Multi-Hop, Logik | unstrukturierte Daten | initialer Aufbau |
| AI-Eignung | RAG | Reporting | Agenten, Reasoning |
Spoiler: In der Praxis kombiniert man meistens alle drei. Der Graph wird zum verbindenden Layer.
Typische Architektur
Quellen (CRM, Tickets, Docs, Code, E-Mail)
↓
Entity Extraction (LLM)
↓
Knowledge Graph (Neo4j, Memgraph, Kuzu)
↓
Hybrid Retrieval (Graph + Vector)
↓
LLM / AgentDie spannende Schicht ist die Entity Extraction: Moderne LLMs sind gut genug, um aus E-Mails, Slack-Threads und PDFs automatisch Entitäten und Beziehungen zu ziehen – das war vor zwei Jahren noch ein eigenes ML-Projekt.
Wann sich ein eigener Graph lohnt
Lohnt sich:
- Ihr habt Daten in vielen Silos, die immer wieder über IDs verknüpft werden müssen
- Eure Nutzer:innen stellen Multi-Hop-Fragen („zeig mir alle Deals, bei denen Person A involviert war und die ein Ticket im Bereich B haben")
- Ihr baut AI Agents, die über mehrere Systeme hinweg agieren
- Ihr habt Compliance-Anforderungen an Herkunft und Nachvollziehbarkeit
Lohnt sich (noch) nicht:
- Eure Use Cases sind reine Textsuche → bleibt bei Vector RAG
- Ihr habt < 5 strukturierte Quellen, die sauber in einer Datenbank liegen → SQL reicht
- Niemand im Team hat Lust auf Datenmodellierung → der Graph wird zur Müllhalde
Unser Take
Knowledge Graphs sind kein neues Thema – Google nutzt sie seit 2012, Palantir noch länger. Neu ist, dass LLMs den Aufbau drastisch billiger gemacht haben und dass Agenten ohne sie schlicht nicht skalieren.
Wir sehen den Knowledge Graph als das Rückgrat ernstzunehmender Enterprise-KI: nicht spektakulär, aber ohne ihn bleibt jeder Agent ein Demo. Wer 2026 ein AI-Produkt baut, das mehr als „chatte mit deinen PDFs" können soll, kommt am Graph nicht vorbei.
Tools, die wir aktuell empfehlen: Neo4j (Klassiker, viel Ökosystem), Kuzu (embedded, schnell), Memgraph (Echtzeit), und für die Extraction-Pipeline LLM-native Frameworks wie LlamaIndex oder eigens gebaute Pipelines mit strukturierten Outputs.
Fazit
Ein Knowledge Graph ist kein Modebegriff, sondern die Antwort auf eine sehr konkrete Frage: Wie bringt man eine LLM dazu, nicht nur plausibel, sondern nachweislich korrekt zu antworten – über Systemgrenzen hinweg?
Wer das Problem nicht hat, braucht keinen Graph. Wer es hat, wird ohne Graph nicht weit kommen.
Tiefer einsteigen:
- GraphRAG vs. Vector RAG – wann reicht semantische Ähnlichkeit nicht mehr?
- Entity Extraction mit LLMs – wie aus Dokumenten ein Graph wird
- Neo4j vs. Kuzu vs. Memgraph – welche Graph-DB für welches Setup
- Obsidian als persönlicher Knowledge Graph – dasselbe Prinzip im Kleinen
Brauchst du das im Unternehmen? Wir bauen Knowledge Graphs als Service – von Discovery über Prototyp bis Production.
Mini Knowledge Graph zum Anklicken
Wählt eine Entität aus, um zu sehen, welche Beziehungen und Attribute sie im Graph hat. Genau so „denkt" ein Agent, wenn er Multi-Hop-Fragen beantwortet.
Tipp: Klickt auf einen Knoten.
- Branche
- Manufacturing
- MRR
- €12.400
- ←betreutAnna Becker
- →nutztmonday.com CRM
- →unterzeichnetMSA #4471
- →meldetTicket #8821
„Was nutzt Acme, was wurde unterschrieben, was läuft schief?"








