Worker
Das Crowdee-Crowd-Panel, Worker-Spezialisierungen und die Zuordnung von Tags zu Pipelines.
Das Crowd-Panel von Crowdee besteht aus über einer Million geprüfter, weltweit verteilter Worker mit vielfältigen Sprachkenntnissen, Fachkompetenz und geografischer Abdeckung. Die Worker reichen von allgemeinen Content-Reviewern bis hin zu zertifizierten Fachspezialisten — darunter forensische Analysten, professionelle Faktenprüfer und Experten für Identitätsverifikation. Jeder Worker im Panel hat einen Qualifizierungsprozess durchlaufen, der Onboarding-Aufgaben, Genauigkeitsbewertungen und die Anerkennung von Richtlinien umfasst, bevor er berechtigt ist, Live-Aufgaben zu erhalten.
Das Routing der Worker erfolgt vollständig automatisiert. Wenn eine Pipeline eine Crowd-Stufe erreicht, ordnet das Aufgabenverteilungssystem von Crowdee die Aufgabe anhand der erforderlichen Tags der jeweiligen Stufe, der Spracheigenschaften des Inhalts und der aktuellen Worker-Verfügbarkeit geeigneten Workern zu. Sie wählen keine einzelnen Worker aus, weisen diese nicht vorab zu und verhandeln nicht mit ihnen.
Worker-Tags
Worker-Tags definieren das Spezialisierungsgebiet eines Workers. Jede Crowd-Stufe einer Pipeline legt die Tags fest, die berechtigte Worker besitzen müssen. Ein Worker muss mindestens einen der erforderlichen Tags innehaben, um die Aufgabe angeboten zu bekommen.
| Tag | Spezialisierung | Verwendet in |
|---|---|---|
general | Allgemeine Content-Überprüfung; kein Fachwissen erforderlich | verify-image-deep, verify-video-full, verify-social-post, verify-multimedia-cross-modal |
image_forensics | Analyse visueller Manipulationen, forensische Bildprüfung auf Pixelebene und Interpretation von Artefakten | verify-image-deep |
video_forensics | Deepfake-Erkennung, Analyse zeitlicher Konsistenz und Bewertung der Video-Authentizität | verify-video-full |
native_speaker | Sprachspezifisches Zuhören und Sprachverständnis; Worker werden der Sprache des Audioinhalts zugeordnet | verify-audio-deepfake |
fact_checker | Journalistische Recherche, Quellenverifikation, Behauptungsbewertung und Gegenchecks | verify-news-article |
identity_verification | Hintergrundprüfungen, Beglaubigung von Qualifikationen, Verifizierung beruflicher Nachweise und Dokumentenauthentizierung | verify-identity-claim |
Tags werden von Crowdee während der Worker-Qualifizierung vergeben. Worker können sich Spezialist-Tags nicht selbst zuweisen; Spezialist-Tags erfordern das Bestehen dedizierter Qualifizierungsbewertungen, die domänenspezifisch sind.
Experten-Worker
Worker mit den Tags fact_checker oder identity_verification agieren als Fachspezialisten und nicht als allgemeine Crowd-Reviewer. Experten-Crowd-Stufen verwenden andere Parameter als Standard-Crowd-Stufen: Es werden nur zwei Antworten benötigt (minResponses: 2), jedoch müssen beide Experten-Worker übereinstimmen — der Konsens-Schwellenwert beträgt 100 %. Sind sich die beiden Experten nicht einig, wird das Stufenverdikt als inconclusive erfasst und es findet keine weitere Rekrutierung statt.
Die geringere Mindestanzahl an Antworten spiegelt die höhere Zuverlässigkeit von Expertenbewertungen wider. Experten-Worker durchlaufen eine intensivere Qualifizierung und unterliegen einer strengeren laufenden Qualitätsüberwachung als allgemeine Crowd-Worker.
Experten-Worker werden einer zusätzlichen Prüfung unterzogen und an einen höheren Qualitätsstandard gehalten. Verwenden Sie Experten-Tags für hochriskante Verifikationen, bei denen Nachvollziehbarkeit unerlässlich ist — beispielsweise für Identitätsangaben, die in eine rechtliche oder Compliance-Entscheidung einfließen, oder für Nachrichtenartikel, die in einem veröffentlichten Bericht zitiert werden sollen.
Experten-Stufen sind langsamer als allgemeine Crowd-Stufen, da der Pool qualifizierter Experten wesentlich kleiner als der allgemeine Crowd-Pool ist und Experten-Worker häufig eine höhere Arbeitsauslastung haben. Eine vollständige Gegenüberstellung der Parameter von Experten- und allgemeinen Crowd-Stufen finden Sie unter Qualitätskontrolle.
Worker-Verwaltung
Das Worker-Dashboard (Plattform → Worker) bietet eine Echtzeitansicht der Crowd-Panel-Statistiken, die für die Aufgaben Ihrer Organisation relevant sind — darunter die Anzahl aktiver Worker pro Tag, die aktuelle Warteschlangentiefe, durchschnittliche Antwortzeiten und aggregierte IRA-Werte nach Tag-Kategorie.
Die Worker-Qualität wird kontinuierlich überwacht. Crowdee verfolgt die historische Genauigkeit jedes Workers anhand von Gold-Fragen, seinen IRA-Beitrag zu vergangenen Crowd-Stufen sowie Muster in der Antwortqualität. Worker, die unter die Qualitätsschwellenwerte fallen, werden bis zur Überprüfung gesperrt. Worker, die wiederholte Qualitätsprüfungen nicht bestehen, werden dauerhaft aus dem Panel entfernt.
Sie können Worker-Statistiken und IRA-Trends im Dashboard einsehen, jedoch keine individuellen Worker-Identitäten einsehen, Worker direkt kontaktieren oder einzelne Worker-Antworten anfechten. Qualitätsbedenken bezüglich eines bestimmten Durchlaufs sollten über den Support-Prozess an support@crowdee.ai gerichtet werden.
Keine direkte Worker-Auswahl
Das Aufgaben-Routing wird vollständig durch das automatisierte Matching-System von Crowdee verwaltet. Sie können keine bestimmten Worker für eine Aufgabe auswählen, bestimmte Worker ausschließen oder darum bitten, dass dieselben Worker, die eine vorherige Stufe abgeschlossen haben, erneut eingesetzt werden.
Dieses Design gewährleistet Unparteilichkeit und verhindert die gezielte Auswahl wohlgesonnener Reviewer. Es stellt außerdem sicher, dass Crowd-Verdikta unabhängig sind — Worker, die einer Crowd-Stufe zugewiesen werden, haben keine Vorbeziehung zum Inhalt, zur einreichenden Organisation oder zu den Antworten der anderen Worker für diese Aufgabe. Diese Unabhängigkeit ist eine Voraussetzung für die IRA-Bewertung und die Konsensmechanismen, die Crowd-Verdikte nachvollziehbar machen.
Für Organisationen, die ein privates oder dediziertes Worker-Panel benötigen — beispielsweise aufgrund von Vertraulichkeitsanforderungen oder der Notwendigkeit von Workern mit bestimmten Sicherheitsfreigaben — bietet Crowdee im Rahmen des Enterprise-Plans eine Managed-Workers-Option an. Kontaktieren Sie sales@crowdee.ai für weitere Informationen.
Wie hilfreich ist diese Seite?
Eingabedaten
Eingabedatentabellen, Listen, Gruppen und Variantengenerierung zur Anpassung von Crowd-Aufgaben.
Qualitätskontrolle
Konsensschwellenwerte, Interrater-Übereinstimmungswerte und Antwortvalidierung in Crowd-Stufen.