Base5 min di letturaAggiornato

L'umano nel ciclo: come IA e moderatori lavorano meglio insieme

La moderazione automatica è veloce, le persone capiscono le sfumature. Come dividere il lavoro, quali azioni automatizzare e quali lasciare a una persona.

Punti di forza diversi

IAModeratori umani
Velocitàmillisecondi, sempre attivaminuti od ore
Coerenzastessa risposta ogni voltadipende dalla persona e dalla giornata
Sfumaturemigliorano, ma limitateironia, storia tra gli utenti, intenzioni
Volumemigliaia di messaggi al minutoqualche centinaio per turno
Costo di un errorepuò ripeterlo ovunquedi solito isolato

Nessuno dei due basta da solo. L'obiettivo è dare a ciascuno il lavoro che fa meglio.

Una divisione pratica

  1. Azioni automatiche e reversibili per i casi chiari con punteggi alti: nascondere il messaggio, rallentare l'utente, chiedergli di riformulare.
  2. Coda di revisione per i punteggi incerti: un moderatore vede il messaggio, i punteggi e la conversazione, e decide.
  3. Solo persone per le azioni gravi e difficili da annullare: ban, segnalazioni alle autorità, decisioni sui minori.
  4. Ricorsi gestiti da una persona diversa da chi ha preso la prima decisione.

Come impostare le fasce di punteggio è spiegato in come scegliere la soglia.

Dai il contesto ai moderatori

Un messaggio da solo può ingannare una persona quanto un modello. Mostra i messaggi precedenti, la storia dell'utente e perché il messaggio è stato segnalato (quale categoria, quale regola, quale punteggio). Il contesto aiuta anche le persone.

Chiudi il ciclo

Ogni decisione umana è un'etichetta: «questo era un falso allarme», «questo è sfuggito». Raccolte nel tempo, queste decisioni sono i dati più preziosi per regolare le soglie e migliorare la versione successiva del modello.

Sii trasparente con gli utenti

Di' alla tua community che i messaggi vengono controllati automaticamente, cosa succede quando un messaggio viene segnalato e come fare ricorso. Le regole che le persone capiscono vengono rispettate di più, e gli errori si perdonano più facilmente quando si possono correggere.

Proteggi i moderatori

I moderatori vedono i contenuti peggiori. Filtrare automaticamente i casi più chiari, sfocare le anteprime e limitare l'esposizione proteggono il loro benessere: un motivo in più per lasciare all'IA il primo passaggio.

Mettiti alla prova

Rispondi alle domande, poi controlla le risposte.

  1. 1. Quale azione va lasciata a una persona?
  2. 2. Cosa fare dei messaggi con punteggi incerti?
  3. 3. Perché le decisioni dei moderatori sono dati preziosi?
  4. 4. Cosa aiuta un moderatore a decidere bene?

Tutte le guide →

Guardalo su messaggi veri

Prova la demo dal vivo, o leggi come funziona l'API.