Web-Recherche
Wie Crowdee im Rahmen quellenzurückverfolgender Pipelines Live-Websuche und -Crawling durchführt.
Die meisten Verifikations-Pipelines von Crowdee schließen aus dem Trainingswissen eines KI-Modells — schnell, aber begrenzt auf das, was das Modell bereits „weiß". Web-Research-Stufen sind anders: Sie führen eine Live-Suche oder ein Live-Crawling des aktuellen Webs durch, bevor das Ergebnis zur Analyse an ein LLM übergeben wird. Dies treibt die Pipeline Quellenrecherche & Glaubwürdigkeitsbewertung an sowie jede zukünftige Pipeline, die eine Behauptung auf ihre tatsächliche aktuelle Quelle zurückführen muss, statt abstrakt darüber zu schließen.
Ablauf einer Web-Research-Stufe
Abfrage auflösen
Die Stufe prüft die Kontextdaten des Laufs und bestimmt entweder eine konkrete URL, die direkt abgerufen werden soll, oder einen Suchbegriff, falls noch keine URL bekannt ist.
Suchen oder abrufen
Ist eine URL bekannt, ruft die Stufe diese Seite direkt ab. Andernfalls durchsucht sie das Web und ruft den vollständigen Inhalt der besten Treffer ab.
Analysieren
Der abgerufene Seiteninhalt — Titel, URL und bereinigter Text — wird zusammen mit den aufgabenspezifischen Anweisungen der Stufe an ein LLM übergeben. Die Ausgabe des Modells wird gegen das strukturierte Ausgabeschema der Stufe validiert, genau wie bei jeder KI-Stufe.
Schlägt das Laden eines bestimmten Ergebnisses fehl (toter Link, blockiert, Timeout), greift dieses Ergebnis auf seinen Suchausschnitt zurück, statt die gesamte Stufe fehlschlagen zu lassen — die Stufe schlägt nur dann vollständig fehl, wenn überhaupt keine Quellen beschafft werden konnten.
Fehlerfälle
| Bedingung | Verhalten |
|---|---|
| Eine abgerufene Seite liefert keinen verwertbaren Inhalt | Diese Quelle wird verworfen; die Stufe fährt mit den übrigen Quellen fort |
| Überhaupt keine Quellen konnten beschafft werden | Stufe schlägt fehl; der Pipeline-Lauf wechselt in den Status failed |
Da eine Web-Research-Stufe den aktuellen Zustand des Webs widerspiegelt und nicht ein festes Korpus, kann ein erneuter Lauf derselben Pipeline zum selben Thema zu einem späteren Zeitpunkt ein anderes Ergebnis liefern, wenn sich der zugrunde liegende Webinhalt geändert hat. Das ist beabsichtigt — die Stufe verfolgt aktuelle Quellen und liefert kein zwischengespeichertes Urteil.
Wie hilfreich ist diese Seite?
Erkennung synthetischer Inhalte
Wie Crowdee die Wahrscheinlichkeit bewertet, dass Inhalte KI-generiert sind, und wo dieses Signal in einem Verifikationslauf erscheint.
Bewertung von KI-Ergebnissen
Mit der Crowd die Transparenz und Erklärbarkeit KI-generierter Verifikationsergebnisse bewerten und daraus eine Rückmeldung zur Verbesserung ableiten.