Hallo Leute, ich suche nach Lösungen eine Wissensdatenbank mit künstlicher Intelligenz aufzubauen.
Wir haben hier auf in unserem Dokumentenverzeichnis sehr viele Datein, zu unterschiedlichen Projekten und würde diese gerne in eine Wissensdatenbank einspielen, sodass man diese Daten über künstliche Intelligenz durchsuchbar machen kann.
Ich habe mich früher mit RAG-KI-Systemen beschäftigt, also mit Vektor-DatenbankEN. Aber für diesen Fall sind die Daten einfach zu viel und zu groß.
Gibt es da mittlerweile vielleicht bessere Möglichkeiten ??
Schau Dir mal das Thema MCP (Model Context Protocol) an. Ist sehr leicht zu implementieren und damit bekäme ein Modell Zugriff auf sämtliche Dateien.
Zu viel und zu groß in einer Vektordatenbank? Ist doch komplett irrelevant, wie viele Daten bei euch rumliegen. Die werden ja nie alle auf einmal ausgewertet, sondern die KI trifft ja eine Vorauswahl. Vielleicht brauchst du einfach mehr Hardware.
Ich würde RAG noch nicht abschreiben, auch bei sehr großen Datenmengen kann das gut funktionieren. Vielleicht wäre eine Kombination aus Vektorsuche, Metadaten/Filtern und einem guten Dokumenten-Index sinnvoller, statt einfach alle Dateien komplett in eine Vektordatenbank zu kippen.