Datenquellen & Import im Detail

Dieser Artikel vertieft alle Import-Wege für Ihre Wissensdatenbanken: welche Datenquelle sich wofür eignet, welche Dateiformate unterstützt werden, wie wiederkehrende Importe funktionieren und wie Sie Vektoren prüfen und Fehler beheben.

1. Vom Computer hochladen: Dateien importieren (alle gängigen Formate inklusive GAEB).
2. URL importieren: Webseiten-Inhalte übernehmen, optional rekursiv.
3. Webseite importieren (Sitemap): Ganze Website per Sitemap, wiederkehrend aktualisierbar.
4. Aus SharePoint importieren: Nur mit Microsoft-Anmeldung und Admin-Rechten sichtbar.

Übersicht: Welche Datenquelle wofür?

Alle Importe starten auf der Detailseite der Wissensdatenbank im Tab Daten & Uploads über den Button Daten importieren.

Die Microsoft-Anbindung richten Sie wie im Artikel Microsoft 365 Integration beschrieben ein. Shop- und Bitrix24-Plugins verwalten Administrator:innen unter Apps & Plugins.

Datei-Upload und unterstützte Formate

Beim Upload vom Computer werden alle Dateien automatisch mit dem AI-Parser (AI Document Intelligence) verarbeitet, auch komplexe PDFs mit Tabellen oder Scans. Eine Parser-Auswahl gibt es nicht.

Wichtige Regeln beim Datei-Upload:

• Pro Upload-Vorgang sind maximal 10 Dateien möglich (per Drag-and-drop oder über Dateien hochladen).
• Duplikate erkennt die Plattform automatisch über den Datei-Hash: Bereits vorhandene Dateien werden übersprungen, Sie erhalten eine entsprechende Meldung.
• Ist das Speicherlimit Ihres Kontos erreicht, blockiert die Plattform neue Uploads.

Wiederkehrende Importe

Webinhalte ändern sich. Deshalb lassen sich URL importieren und Webseite importieren (Sitemap) wiederkehrend ausführen:

• Beim URL-Import steuern Sie mit dem Toggle Rekursiven Parser verwenden?, ob verlinkte Unterseiten mitgeladen werden. Die Maximale Rekursionstiefe ist auf 0 bis 3 begrenzt.
• Beim Sitemap-Import grenzen Sie mit Filter der zu importierenden URLs per RegEx ein, welche URLs geladen werden (mehrere Ausdrücke kommagetrennt, leer lassen für alle URLs).
• In beiden Formularen wählen Sie unter Häufigkeit der Aktualierung in Tagen den Rhythmus: Keine wiederkehrenden Ausführung, Wöchentlich, Alle zwei Wochen, Monatlich oder Quartalsweise.

Jeder Lauf erscheint als Import-Job ("Import vom ...") mit eigenem Status. So sehen Sie jederzeit, wann zuletzt aktualisiert wurde, und können einzelne Import-Jobs samt zugehöriger Datenquellen wieder Entfernen.

Status, Suche und Bulk-Aktionen

Im Tab Daten & Uploads verwalten Sie alle Datenquellen zentral:

• Über das Dropdown Alle Status filtern Sie die Liste nach einem Status, das Suchfeld durchsucht Ihre Datenquellen nach Namen.
• Mit Alle auswählen (oder einzelnen Checkboxen) markieren Sie mehrere Datenquellen und wenden Bulk-Aktionen an: Importieren (erneut importieren), Herunterladen oder Löschen.

Vektoren und Chunking

Beim Import zerlegt hermine.ai jede Datenquelle in kleine Textabschnitte (Chunks) und speichert sie als Vektoren in der Vektordatenbank Ihres Kontos. Der Header der Wissensdatenbank zeigt die Summe: Anzahl Datenquellen, Größe in MB, Anzahl Vektoren und Genutzt von.

Ein Klick auf eine Datenquelle öffnet die Detailseite der Datenquelle:

1. Die Seitenüberschrift zeigt den Titel der Datenquelle; darunter Details, Statistiken und alle Inhalte.
2. Der Bereich Data Vectors mit Zähler und Suchfeld Vektoren durchsuchen...: alle Textabschnitte der Datenquelle im Überblick.
3. Entfernen an einem aufgeklappten Vektor-Eintrag löscht einzelne Abschnitte gezielt.

Auf dieser Seite können Sie:

• Vektoren durchsuchen und die Rohdaten einzelner Abschnitte einsehen, um zu prüfen, was die KI tatsächlich gespeichert hat.
• Einzelne Vektoren entfernen, etwa veraltete Absätze, ohne die ganze Datenquelle neu zu importieren.
• Unter Statistiken die Nutzung verfolgen: Anzahl Anfragen, Tokens und Kosten.
• In der Gefahrenzone die Aktion Datenquelle und alle Inhalte entfernen ausführen; das löscht die Datenquelle und alle zugehörigen Vektoren unwiderruflich.

Fehlerbehebung

Tipp: Testen Sie nach jedem größeren Import im Tab Testen, ob die Wissensdatenbank die erwarteten Antworten liefert. Wie das geht, lesen Sie im Artikel Wissensdatenbanken erstellen und verwalten.