Hoe nauwkeurig zijn AI-detectoren?
De nauwkeurigheid van een AI-detector hangt af van het benchmarkmonster, de tekstlengte, de taal, de modelversie, de mate van bewerking en het documenttype. Nauwkeurigheidsclaims zijn nuttig voor vergelijking, maar ze bewijzen niet het auteurschap van één afzonderlijk document.
Kan een AI-detector 100% nauwkeurig zijn?
Geen enkele verantwoorde AI-detector zou perfecte nauwkeurigheid voor elk document mogen beloven. Menselijke teksten, bewerkte AI-concepten, vertaling, sjablonen en korte fragmenten kunnen onzekerheid of valse positieven veroorzaken.
Hoe moeten teams de nauwkeurigheid van een AI-detector beoordelen?
Teams zouden detectoren moeten testen op hun eigen documenttypes, waaronder menselijke teksten, tekst die alleen door AI is gemaakt, bewerkte AI-concepten, meertalige fragmenten, korte inzendingen en zaken met hoge belangen die documentatie door de beoordelaar vereisen.