Grammarly AI Checker felülvizsgálata: Pontos?

2024 augusztusában a Grammarly elindította AI tartalomdetektorát, miután a mesterséges intelligencia-ellenőrzőket nevezte meg "megbízhatatlan."

A Grammarlyban világszerte több mint 30 millió ember bízik. 

Jól ismert arról, hogy számos eszközön és platformon segít a helyesírás, a nyelvtan, a stílus és a hangnem javításában. 

Emiatt az emberek izgatottak voltak, amikor a Grammarly hozzáadott egy eszközt az AI által írt tartalmak felismerésére.

Most meg kell néznünk, hogy a Grammarly AI Checker megoldja-e azokat a problémákat, amelyeket egyszer már kritizáltak?

Pontos a Grammarly mesterséges intelligenciaellenőrző?

Vagy konkrétak leszünk.

Megbízható a Grammarly AI checker?

Ebben a blogban hat különböző tartalomtípuson teszteljük a Grammarly AI-ellenőrzőjét, hogy lássuk, mennyire jól működik.

Pontosan megmutatjuk, hogy hol sikeres, hol nem, és hogy megbízhat-e benne a tartalomellenőrzési igényeinek kielégítésére. 

---

A legfontosabb tudnivalók

• A Grammarly mesterséges intelligenciaellenőrzője 6 tartalomtípuson végzett tesztjeink során mindössze 33% pontosságot ért el.

• Az eszköz helyesen azonosította az 100% emberi tartalmat, de nem észlelte a teljesen mesterséges intelligencia által generált szöveget.

• Pontos a Grammarly mesterséges intelligenciaellenőrző? Tesztjeink alapján az érzékelőnek nehézségei vannak a parafrazált AI-tartalommal és az ember és AI vegyes írással.

• Az ingyenes felhasználóknak 1000 szó a limitje beadványonként, míg a prémium felhasználóknak magasabb a limit.

• Speciálisabb eszközök, mint például Kimutathatatlan AI detektor (100% pontosság) sokkal megbízhatóbbak, mint a Grammarly AI checker ingyenes verziója.

---

Mi az a Grammarly AI Checker?

A Grammarly AI Checker arra szolgál, hogy segítsen észrevenni, hogy egy írásművet esetleg mesterséges intelligencia generált-e. 

Az érzékelőt közvetlenül a A Grammarly meglévő platformja, így a nyelvtani, helyesírási és stíluseszközökkel együtt működik. 

Így ment a Grammarly AI checker bevezetése:

• 2024. augusztus: Az AI detektor hivatalos elindítása
• 2024. szeptember: Béta verzió megjelent a Google Docs számára
• 2025 elején: Még több funkció készül, különösen a pedagógusok számára

Ez a funkció része a Grammarly szélesebb körű törekvésének a "Grammarly szerzőség." IÍgy akarnak kiállni a hiteles, emberi írás mellett egy olyan korban, amikor a mesterséges intelligencia mindenütt jelen van.

Kinek szól ez az eszköz?

• Diákok és tanárok.
• Tartalomkészítők és marketingesek.
• Profi írók.

Mivel az érzékelő a Grammarly fő platformjának része, sokkal könnyebb használni, mint a különálló AI-ellenőrző eszközök. 

Ha már használja a Grammarlyt, akkor ez a funkció jól illeszkedik a munkafolyamatába - nem kell másolni és beilleszteni egy másik weboldalra.

A Grammarly AI Detector fő jellemzői

Íme, a Grammarly AI checker kiemelkedő funkciói:

• Grammarly AI checker ingyenes a terv legfeljebb 1000 szót elemez. A Premium magasabb limiteket és több eszközt kínál.

• Teljesen beágyazva a Grammarly webes, asztali és mobilalkalmazásaiba - nincs szükség további eszközökre.

• Az AI által generált tartalom százalékos valószínűségét mutatja.

• Működik böngészőbővítményeken, asztali alkalmazásokon és mobileszközökön.

• Azonnal felismeri az AI-tartalmat írás közben.

Hogyan működik a Grammarly AI Checker

A Grammarly AI checker a mesterséges intelligenciával írt tartalmakban gyakori minták felismerésével dolgozik. 

Olyan dolgokat vizsgál, mint a mondatok felépítése, az írás stílusa és az ismétlődő nyelvi szerkezetek.

Az eszköz gépi tanulást használ. 

Ez azt jelenti, hogy rengeteg példán képezték ki, hogy felismerje, hogyan néz ki általában az AI-írás. 

A Grammarly azt mondja, hogy "szigorú teszteléssel" biztosítja, hogy az eszköz irányítottan pontos legyen - jó a valószínű AI felismerésében, még ha nem is tökéletes.

De mennyire megbízható a Grammarly AI checker teljesítménye a gyakorlatban? Hosszabb szövegek esetén működik a legjobban.

A rövid szakaszok nem adnak elég adatot az elemzéshez, így az eredmények kevésbé pontosak lehetnek.

Mivel a Grammarly platformjába épül be, ugyanazokat a rendszereket használja, amelyek a nyelvtant és a stílust ellenőrzik. 

Ez segít megérteni az írás általános áramlását. 

De van egy hátránya is - mivel ez nem egy dedikált mesterséges intelligencia detektor, előfordulhat, hogy olyan dolgokat hagy ki, amelyeket a speciális eszközök jobban fel tudnak fedezni.

Pontos a Grammarly AI Checker?

Annak értékeléséhez, hogy a Grammarly AI checker pontos-e vagy sem, használtuk a A ZDNet keretrendszere.

Ez a módszertan hat különböző tartalmi kategóriát elemez a valós teljesítmény mérésére.

A teszt: 6 tartalmi kategória

A Grammarly által biztosított mesterséges intelligencia-ellenőrzőt hatféle tartalomtípuson teszteltük:

Kategória	Tartalom típusa
1	100% AI
2	100% Emberi
3	Enyhén szerkesztett AI
4	Parafrazált mesterséges intelligencia
5	Vegyes emberi + mesterséges intelligencia
6	AI a plágiummal

Lássuk, hogyan teljesített a Grammarly AI checker az egyes kategóriákban:

kategória: 100% AI

A valóság: Teljesen AI-generált
Grammarly Eredmény: 50% AI
Ítélet: Hibás észlelés

Ezt a tartalmat teljes egészében a ChatGPT generálta, emberi szerkesztés nélkül.

Az AI Grammarly-ellenőrzőnek ezt erősen AI-generáltnak kellett volna jeleznie, de csak 50% AI valószínűséget észlelt.

2. kategória: 100% Human (Klasszikus hirdetés)

A valóság: Ember által írt
Grammarly Eredmény: 0% AI (100% Human)
Ítélet: Helyes észlelés

A tartalom évtizedekkel azelőtt íródott, hogy léteztek volna mesterséges intelligencia eszközök. A Grammarly AI-ellenőrzője helyesen azonosította, hogy ez teljesen emberi kézzel írt szöveg.

3. kategória: Enyhén szerkesztett mesterséges intelligencia

A valóság: Elsősorban mesterséges intelligencia, minimális emberi szerkesztéssel
Grammarly Eredmény: 25% AI
Ítélet: Hibás észlelés

Ebből a tartalomból csak 20-25% kapott emberi szerkesztést. A Grammarly mesterséges intelligencia-ellenőrző program jelentősen alulbecsülte a mesterséges intelligencia részvételét.

4. kategória: Parafrazált mesterséges intelligencia tartalom

A valóság: Mesterséges intelligencia eredete, emberi hangzásúra átfogalmazva
Grammarly Eredmény: 33% AI
Ítélet: Helyes észlelés

Ezt a tartalmat eredetileg mesterséges intelligencia generálta, majd humanizációs eszközökkel parafrazálták. A Grammarly AI-ellenőrzője észlelt néhány AI-nyomot.

5. kategória: Vegyes emberi + mesterséges intelligencia tartalom

A valóság: 50% emberi írás + 50% mesterséges intelligencia által generált mondatok
Grammarly Eredmény: 20% AI
Ítélet: Hibás észlelés

Egyenlő arányban emberi és mesterséges tartalom esetén a mesterséges nyelvtani ellenőrző programnak körülbelül 50% mesterséges intelligenciát kellett volna észlelnie, nem pedig 20%-t.

6. kategória: AI plágiummal

A valóság: Tényszerű történelmi átfedésekkel megírt mesterséges intelligencia
Grammarly Eredmény: 25% AI
Ítélet: Hibás észlelés

Ez teljesen mesterséges intelligencia által generált tartalom volt, amely történetesen tartalmazott néhány történelmileg pontos információt. A Grammarly AI-ellenőrzője teljesen kihagyta az AI-generálást.

Végső eredménylista

Az összesen 6 tesztesetből:

• Helyes észlelések: 2 (2. és részben 4. kategória)
• Hamis pozitív/negatív: 4 (1., 3., 5., 6. kategória)

Érzékelési pontosság: 33%

A Grammarly AI-ellenőrző korlátozott megbízhatóságot mutat, és csak az esetek egyharmadában azonosítja pontosan a tartalmat.

Míg a tisztán emberi tartalom felismerésében kiválóan teljesít, addig az összes többi kategóriában következetesen alulbecsüli a mesterséges intelligencia részvételét.

Ez a teljesítmény rávilágít egy kritikus problémára: a Grammarly mesterséges intelligencia-ellenőrző nem csak megbízhatatlan, de veszélyesen félrevezető is a felhasználók számára, akiknek pontos mesterséges intelligencia-felismerésre van szükségük.

Tehát a saját tartalomellenőrzéshez... 

Használja a címet. Kimutathatatlan AI detektor az 100% pontos eredményekhez. A ZDNet saját tesztelései során ez az AI-érzékelő mind a hat kategóriát helyesen azonosította, hamis pozitív és negatív eredmények nélkül.

Ön is alkalmazhatja a mi Észrevehetetlen AI Humanizer a megjelölt szakaszok átírása, amíg azok valóban emberinek nem tűnnek.

Több érzékelővel történő ismételt tesztelés, hogy megerősítse, hogy a tartalom átmegy a különböző platformokon.

Grammarly AI Checker Gyengeségek és korlátozások

Íme a Grammarly mesterséges intelligencia-ellenőrzőjének főbb módjai, amelyekkel nem találja el a célt:

Pontossági problémák

• Néha figyelmen kívül hagy olyan tartalmakat, amelyeket egyértelműen mesterséges intelligencia írt.
• Ha alacsony AI-pontszámot ad, azt hiheti, hogy a tartalom eredetibb, mint amilyen valójában.
• Az eredmények nem konzisztensek - a pontosság a tartalom típusa és az azt létrehozó mesterséges intelligenciamodell alapján változik.

Műszaki korlátozások

• Az ingyenes felhasználók egyszerre legfeljebb 1000 szót vizsgálhatnak.
• Angol nyelvre optimalizált, és nem kezeli jól a többi nyelvet.
• A kötetlen, kreatív vagy informális írás megzavarhatja.
• Hosszabb szövegek elemzésekor hajlamos lelassulni.

Gyakorlati hátrányok

• Egyszerre több dokumentumot nem tud feltölteni vagy ellenőrizni.
• Nem tesz különbséget az AI által szerkesztett és az AI által írt tartalom között.

Alapvető kihívások

• Az eszköz nehezen tud lépést tartani azzal, hogy milyen gyorsan fejlődik a mesterséges intelligencia.
• Az újabb AI-modellek könnyen átcsúszhatnak az észlelésen.
• A vegyes tartalom - ahol az emberek szerkesztik vagy bővítik a mesterséges intelligencia kimenetét - gyakran észrevétlen marad.

Grammarly AI Checker vs. Más AI Detectorok

Ami a mesterséges intelligencia felismerésének pontosságát illeti, a Grammarly mesterséges intelligencia-ellenőrzője nem tud lépést tartani a kifejezetten erre a feladatra tervezett eszközökkel.

Íme, hogyan teljesítettek a legjobb detektorok a tesztelés során:

Szerszám	Pontosság	Kiemelkedő funkció	Gyengeség	Ár/hó
Grammarly	33%	Zökkenőmentes integráció az írási platformmal	Veszélyesen alacsony pontossági arányok	$12
Kimutathatatlan AI	100%	AI humanizátor az érzékelők megkerülésére	Korlátozott szabad felhasználás	$19
Copyleaks	50-80%	Többnyelvű támogatás (több mint 30 nyelv)	Kevésbé pontos az újabb AI modellekkel	$17
GPT Zero	100%	Mondatonkénti mesterséges intelligencia valószínűségi pontszámítás	Korlátozott ingyenes szint	$15
StealthWriter AI	50%	Átírja a mesterséges intelligencia szövegét, hogy emberi kézzel írtnak tűnjön.	Megváltoztathatja az eredeti jelentést	$20

Megjegyzés: Átfogó felülvizsgálatot végeztünk mind a Copyleaks és StealthWriter AI ugyanazon vizsgálati módszertan alkalmazásával.

A Grammarly felismeri az AI-szerkesztett vagy átfogalmazott szöveget?

Ez az a pont, ahol a Grammarly mesterséges intelligenciaellenőrző program a legnagyobb gyengeségét mutatja.

Parafrazált AI tartalom teljesítménye

Tesztelésünk során a Grammarly AI Checker csak 33% AI-t észlelt olyan tartalomban, amely eredetileg 100% AI-generált, de humanizációs eszközökkel parafrazált.

Ez azt jelenti, hogy bárki, aki AI parafrazáló eszközöket vagy AI humanizáló szoftvert használ, könnyen megkerülheti a Grammarly AI Checker észlelését.

Az AI-szerkesztett tartalom kihívásai

A mesterséges intelligenciával működő Grammarly-ellenőrző még nehezebben kezeli a mesterséges intelligenciával szerkesztett tartalmakat - olyan szövegeket, amelyek emberi eredetűek, de mesterséges intelligencia javítja vagy bővíti őket.

A "enyhén szerkesztett AI" kategória csak 25% AI kimutatását mutatta, amikor a valóságban 75-80% AI részvétel volt.

Az olyan eszközök, mint a Észrevehetetlen AI humanizálója és AI parafrazáló kifejezetten úgy tervezték, hogy elkerüljék a felderítést. A oldalon utolsó felülvizsgálatunk, teszteltük a humanizáló eszközök pontosságát, és a tesztelésünk azt mutatta:

StealthWriter AI: Az AI-érzékelés 100%-ről 5%-re csökkent több érzékelőn keresztül.
Kimutathatatlan AI: Elérte az 1% AI kimutatását a humanizálás után
Quillbot parafrazálás: Még mindig mutatott 76% AI észlelést (kevésbé hatékony)

A lényeg: Ha valaki meg akarja kerülni a Grammarly AI Checker-t, a könnyen elérhető eszközökkel ez triviálisan egyszerű.

Az AI Detector és Humanizer közvetlenül az alábbi widgeten keresztül érhető el.

GYIK a Grammarly AI Checkerről

Következtetés

A Grammarly AI-ellenőrzőt könnyű használni, mivel a Grammarly platformba van beépítve, de tesztjeink azt mutatják, hogy nem túl pontos. 

A 33% pontos volt. Ez azt jelenti, hogy gyakran hagyja ki az AI által generált tartalmat, vagy hibás eredményeket ad.

Elég pontos a Grammarly AI ellenőrzője? 

Ha csak egy gyors és egyszerű ellenőrzésre van szüksége a Grammarlyn belül, ez működhet. 

Ha valóban meg kell állapítania, hogy valamit mesterséges intelligencia írt-e, ez az eszköz önmagában nem elegendő - vannak más lehetőségek, amelyek sokkal jobban teljesítenek.

A Grammarly AI checker ingyenes verziója rövid szövegek ellenőrzését teszi lehetővé, a fizetős verzió pedig több funkciót kínál, de egyik sem oldja meg a pontossági problémát. 

Ha meg kell bíznia az eredményekben, jobb, ha olyan megbízható eszközöket használ, mint a Kimutathatatlan AI detektor az 100% pontosságához.