Sì, nella maggior parte dei casi. E quando un umanizzatore riesce ad abbassare il punteggio di rilevamento IA di Compilatio, è quasi sempre a prezzo di un testo degradato, al limite dell'incoerenza.
Le spieghiamo che cosa sono questi strumenti, che cosa mostrano i nostri primi test interni e dove continueremo ad approfondire.
1. Che cos'è uno strumento di umanizzazione?
Uno strumento di umanizzazione (o «humanizer») è un software che riformula un testo generato da un'IA per cercare di nasconderne l'origine e far credere che sia stato scritto da una persona. In concreto: si incolla un testo prodotto da ChatGPT, Gemini o un altro modello, lo strumento ne cambia le parole, la struttura delle frasi e il ritmo, e restituisce una versione che dovrebbe passare inosservata ai rilevatori.
Non tutti questi strumenti nascono con questo scopo. Alcuni, come Quillbot o Wordtune, sono in origine strumenti di riformulazione e di supporto alla scrittura. Altri, come Undetectable AI o BypassGPT, sono concepiti fin dall'inizio per aggirare il rilevamento, e lo dichiarano apertamente nel nome e nella promessa commerciale.
Man mano che scuole e università si sono dotate di rilevatori di IA, in tutto il mondo si è sviluppato, in modo speculare, un mercato parallelo di strumenti per aggirare quegli stessi rilevatori. I due mercati avanzano insieme dal 2023: più si diffonde il rilevamento dei testi generati da IA, più gli strumenti di aggiramento si perfezionano, e viceversa.
2. La resistenza di Compilatio agli strumenti di aggiramento
Abbiamo condotto un'analisi interna per misurare la reale resistenza del nostro rilevamento agli strumenti di aggiramento, con i 6 strumenti di umanizzazione più utilizzati al mondo.
La metodologia:
300 testi analizzati, generati da due IA (ChatGPT e Gemini), riformulati dai 6 strumenti di umanizzazione più popolari al mondo, in francese e in inglese. Per ogni testo abbiamo osservato l'evoluzione del punteggio di rilevamento Compilatio prima e dopo il passaggio nello strumento di umanizzazione, e valutato qualitativamente la riformulazione ottenuta.
Risultati in sintesi:
Gli strumenti testati sono volutamente anonimizzati. L'obiettivo di questo articolo è spiegare la tendenza di fondo che osserviamo sul nostro strumento di rilevamento.
| Strumento | Evoluzione del punteggio di rilevamento Compilatio prima e dopo l'umanizzazione | Qualità del testo* |
| Humanizer 1 | Forte calo | 1,4 / 5 |
| Humanizer 2 | Forte calo | 1,5 / 5 |
| Humanizer 3 | Calo moderato | 1,8 / 5 |
| Humanizer 4 | Lieve calo | 2,3 / 5 |
| Humanizer 5 | In aumento | 3,6 / 5 |
| Humanizer 6 | In aumento | 3,8 / 5 |
*Valutazione qualitativa interna su 5, non una misurazione automatizzata: da considerare come una tendenza, non come un punteggio assoluto.
Che cosa osserviamo:
- Gli strumenti che fanno calare di più il punteggio di rilevamento sono anche quelli che degradano di più la qualità del testo, fino a renderlo inutilizzabile in ambito accademico.
- Gli strumenti che preservano meglio la qualità del testo non fanno calare il punteggio di rilevamento; al contrario, lo fanno persino risalire.
La conclusione sta in una frase: a oggi, nessuno dei 6 strumenti testati riesce allo stesso tempo a ingannare efficacemente il rilevamento e a produrre un testo di buona qualità accademica.
→ O si degrada drasticamente la qualità del proprio testo sperando di passare inosservati.
→ O si mantiene un testo di qualità, e l'IA continua a essere rilevata, spesso ancora di più di prima.
In entrambi i casi, il tempo speso per aggirare il rilevamento sarebbe stato meglio investito nell'approfondire l'argomento trattato.
3. Prossimi passi
Questo tema evolve rapidamente, e così gli strumenti. Ecco su che cosa lavoreremo molto presto:
- Ampliare il nostro corpus di test, con più testi e più strumenti di umanizzazione, per affinare e consolidare queste prime osservazioni.
- Ampliare il numero di lingue testate, proseguendo con francese e inglese e aggiungendo spagnolo e italiano.
- Continuare ad addestrare il nostro modello di rilevamento, sia sulla generazione IA classica sia sulle tecniche di umanizzazione.
📌 Domande su Magister, Magister+, il plagio o l'IA?
Ottieni risposte in diretta durante il nostro Webinar "Domande & Risposte".
👉 Iscriviti alla prossima sessione
Questo articolo è stato tradotto con un traduttore automatico. Se notate errori di traduzione, fatecelo sapere.