Szybka odpowiedź
Jeśli użyłeś ChatGPT, Claude lub Gemini do napisania eseju i obawiasz się, że nauczyciel to pozna, ten przewodnik wyjaśnia dokładnie, czego szuka. Jeśli uczysz i chcesz pewniej rozpoznawać pisanie AI, te same 10 sygnałów ma zastosowanie. Przepuść dowolny szkic przez nasz Detektor AI, by zobaczyć te same sygnały ocenione automatycznie.
10 zdradliwych oznak
1. Jednolita długość zdań (niska zmienność)
To największy pojedynczy sygnał. Ludzcy autorzy mieszają bardzo krótkie zdania z długimi, wijącymi się. Tekst AI skupia się wokół 18 do 22 słów na zdanie z niewielką wariancją. Przeczytaj akapit AI na głos, a usłyszysz równy, metronomiczny rytm. Przeczytaj akapit ludzki, a usłyszysz perkusję z uderzeniami różnej wielkości.
Badacze nazywają to zmiennością (burstiness). Praca DetectGPT ze Stanforda (Mitchell i in. 2023) wykazała, że zmienność to najsilniejszy pojedynczy sygnał statystyczny w wykrywaniu tekstu generowanego maszynowo.
2. Frazesy AI (zagłębić się, gobelin czegoś, podsumowując)
Duże modele językowe uwielbiają ustalony zasób wypełniaczy. Nauczyciele zapamiętali tę listę. Najczęściej oznaczane zwroty:
- zagłębić się (skrajnie nadużywane przez ChatGPT)
- gobelin czegoś
- poruszanie się po zawiłościach
- w dzisiejszej erze cyfrowej
- solidne ramy
- wykorzystując
- nieustannie ewoluujący
- kompleksowy przegląd
- mnóstwo
- kluczowa rola
- podsumowując (jako jedyne przejście zamykające)
Jeden czy dwa z nich w eseju na 500 słów mogą ujść. Pięć lub więcej to czerwona flaga.
3. Niejasne przykłady bez konkretów
AI halucynuje ogólnikami. Prawdziwy uczeń pisze mój nauczyciel historii wspomniał o traktacie wersalskim w zeszłym tygodniu. AI pisze wielu historyków uważa, że traktat miał znaczące konsekwencje. Konkrety zakotwiczają ludzkie pisanie. Ogólnikowe twierdzenia (badania pokazują, wielu ludzi uważa, w ostatnich czasach) bez nazwanego źródła, daty czy przykładu to odcisk palca AI.
4. Nadużywanie myślnika i średnika
Interpunkcja to odcisk palca. AI nadużywa znaku myślnika i średnika. Większość studentów rzadko sięga po którykolwiek. Esej na 500 słów z czterema lub więcej myślnikami i dwoma lub więcej średnikami jest statystycznie nietypowy dla typowego szkicu ucznia.
5. Przewidywalna struktura (wstęp + 3 akapity + zakończenie)
AI domyślnie wraca do eseju pięcioakapitowego, nawet gdy polecenie tego nie wymaga. Trzy akapity rozwinięcia, każdy otwierany słowem przejściowym jak ponadto lub co więcej, każdy długości trzech do pięciu zdań, każdy ze zdaniem tematycznym, po którym idą dwa zdania wspierające i jedno zamykające. Symetria jest zbyt czysta.
6. Puste zakończenia, które tylko streszczają wstęp
Zakończenia AI mają tendencję do powtarzania tego, co esej już powiedział. Podsumowując, jak omówiono powyżej, temat jest ważny z wielu powodów. Ludzkie zakończenie zwykle coś dodaje: nowe ujęcie, osobistą stawkę, pytanie do czytelnika lub konkretną rekomendację. Zakończenie AI zapętla się bez ruchu naprzód.
7. Ogólnikowe przejścia (ponadto, co więcej, dodatkowo)
AI uwielbia akademicko brzmiące przysłówki przejściowe. Ponadto, co więcej, dodatkowo, w dodatku, podsumowując, w rezultacie. Ludzcy autorzy zwykle mieszają je z przejściami przez przerwę między zdaniami i urozmaiconymi początkami. Szkic, w którym każdy akapit zaczyna się od tej samej rodziny przejść, sygnalizuje, że napisał go model.
8. Brak osobistego głosu lub opinii
Nawet w formalnych esejach akademickich ludzcy autorzy zostawiają odciski palców: dobór słów, lekkie nastawienie, moment podkreślenia. Szkice AI czytają się tak, jakby nie napisał ich nikt konkretny. Żadnego ja, żadnego mój, żadnej jasnej stawki. Gdy nauczyciel czyta dwa akapity i nie potrafi zgadnąć, w co wierzy autor, to ślad AI.
9. Powierzchowna analiza bez głębi
AI dobrze streszcza, a słabo analizuje. Potrafi opisać, co mówi wiersz. Ma trudność z tym, dlaczego konkretny wybór obrazu ma znaczenie w kontekście biografii poety. Nauczyciele czytający eseje z literatury, historii czy filozofii zauważają, gdy tekst omawia temat szeroko, bez bliskiej lektury, która dowodzi, że uczeń zaangażował się w materiał.
10. Zmyślone cytaty lub błędne szczegóły
AI z przekonaniem wymyśla źródła. Zmyślone badanie Smith i Jones 2019. Książka, która nie istnieje. Błędnie przypisany cytat. Nauczyciele przedmiotowi wyłapują je natychmiast, bo znają dziedzinę. Uczeń cytujący fałszywą pracę to jeden z najjaśniejszych możliwych sygnałów AI. Nauczyciele sprawdzają cytaty.
Prawdziwy przykład: esej AI kontra esej ludzki obok siebie
To samo polecenie: omów wpływ mediów społecznościowych na zdrowie psychiczne nastolatków.
Wersja AI (200 słów):
W dzisiejszej erze cyfrowej media społecznościowe stały się integralną częścią życia nastolatków, głęboko kształtując sposób, w jaki młodzi ludzie wchodzą w interakcje ze światem wokół nich. Liczne badania wykazały, że nadmierne korzystanie z platform takich jak Instagram, TikTok i Snapchat może prowadzić do mnóstwa wyzwań dla zdrowia psychicznego. Ponadto stała ekspozycja na wyselekcjonowane treści często sprzyja poczuciu nieadekwatności i porównywaniu się wśród młodzieży. Co więcej, uzależniający charakter tych platform może skutkować obniżoną jakością snu, co z kolei negatywnie wpływa na dobrostan emocjonalny. Warto również zauważyć, że cybernękanie, wszechobecny problem w krajobrazie cyfrowym, może mieć druzgocące konsekwencje dla zdrowia psychicznego nastolatków. Dodatkowo brak znaczących interakcji twarzą w twarz może przyczyniać się do poczucia izolacji i samotności. Choć media społecznościowe oferują gobelin możliwości połączenia i autoekspresji, poruszanie się po zawiłościach ich wpływu wymaga zrównoważonego podejścia. Rodzice, nauczyciele i decydenci muszą współpracować, by pielęgnować zdrowsze nawyki cyfrowe wśród nastolatków. Podsumowując, wykorzystując świadomość i wdrażając przemyślane strategie, społeczeństwo może złagodzić niekorzystne skutki mediów społecznościowych na zdrowie psychiczne młodzieży i wzmocnić młodych ludzi, by rozkwitali w nieustannie ewoluującym cyfrowym świecie.
Wersja ludzka (200 słów):
Moja kuzynka ma 14 lat i sprawdza Instagram, zanim wstanie z łóżka. Zapytałem ją kiedyś, jak się przez to czuje. Powiedziała, że zmęczona. To utkwiło mi w pamięci. Badania ją popierają. Badanie z 2023 roku z Sapien Labs na 27.000 młodych dorosłych wykazało, że im wcześniej ktoś dostał smartfon, tym gorsze było jego zdrowie psychiczne w wieku 18 do 24 lat. Efekt był najostrzejszy u dziewcząt. Nie wszystko w mediach społecznościowych jest złe. Moja kuzynka poznała najbliższą przyjaciółkę przez Discord o fanfikach i rozmawiają codziennie. Ale ta część, która przewija się przy jej twarzy podczas kolacji, której nie może przestać sprawdzać, to ta część rujnuje jej sen. Rozwiązaniem nie jest niczego zakazywać. To dać nastolatkom głos we własnym korzystaniu, a potem poprzeć to rodzicami, którzy odkładają własne telefony. Najtrudniejszą szkolną zasadą, jaką kiedykolwiek przyjęła moja szkoła, było żadnych telefonów w stołówce. Ludzie nienawidzili jej przez tydzień. Potem nikt o niej nie wspominał. Większość znanych mi dzieci, w tym moja kuzynka, po cichu odetchnęła z ulgą.
Co się zmieniło: wersja AI ma jednolite zdania na 18 do 24 słów, sześć wyraźnych frazesów AI (era cyfrowa, mnóstwo, poruszanie się po zawiłościach, gobelin, wykorzystując, nieustannie ewoluujący), brak konkretnego źródła, brak osobistej stawki i puste zakończenie. Wersja ludzka waha się od zdań 4-słowowych (Powiedziała, że zmęczona.) do 30-słowowych, cytuje jedno konkretne badanie z liczbą, nazywa konkretny przypadek użycia platformy, zajmuje stanowisko i kończy małą, konkretną anegdotą.
Dlaczego nauczyciele potrafią poznać tak szybko
Trzy powody. Po pierwsze, rozpoznawanie wzorców. Nauczyciel, który ocenia 30 esejów tygodniowo przez dziesięć lat, przeczytał 15.000 esejów. Rytm AI czyta się inaczej niż krzywa rozkładu pisania uczniów. Gdy raz zobaczysz ten wzorzec, nie da się go odzobaczyć.
Po drugie, sygnatury słownictwa. Badacze i wydziały filologii krążą teraz nieformalne listy frazesów AI, często około 28 słów i zwrotów, które pojawiają się nieproporcjonalnie często w wyjściu ChatGPT. Gdy pięć lub więcej pojawia się w jednym eseju ucznia, to ślad statystyczny.
Po trzecie, wiedza przedmiotowa. Nauczyciele znają swoją dziedzinę. Zmyślony cytat, błędna data lub cytat, którego nazwany autor nigdy nie wypowiedział, mówi profesorowi historii dokładnie, co się stało. Halucynacje AI to prezent dla oceniających przedmiotowo.
Co zrobić, jeśli użyłeś AI
Masz opcje i mają one znaczenie w tej kolejności.
- Najpierw przeczytaj zasady szkoły dotyczące AI. Niektóre szkoły pozwalają na AI przy ujawnieniu. Niektóre tego wymagają. Niektóre całkowicie zakazują. Ujawnienie to zwykle najbezpieczniejsza droga, jeśli jeszcze nie oddałeś pracy.
- Przepisz własnym głosem. Nasz pełny przewodnik o humanizacji tekstu AI przeprowadza przez 9 konkretnych technik. Celem nie jest oszukanie detektorów. To tekst, który brzmi jak Ty.
- Dodaj prawdziwe konkrety. Własne przykłady, prawdziwe źródło, które przeczytałeś, osobistą obserwację. Nawet jeden konkretny szczegół na akapit zmienia odbiór.
- Przetestuj naszym Detektorem AI. Wklej zredagowany szkic do naszego Detektora AI. Celuj w werdykt Prawdopodobnie człowiek lub Niepewne, zanim oddasz.
- Jeśli już oddałeś i czujesz się winny, porozmawiaj z nauczycielem. Większość nauczycieli lepiej reaguje na ucznia, który się przyzna, niż na takiego, który zaprzecza pod naciskiem.
Co zrobić, jeśli jesteś nauczycielem
Podejrzewanie użycia AI to jedno. Działanie na tej podstawie w sposób uczciwy to drugie. Oto, co robią doświadczeni nauczyciele.
- Używaj detektorów jako jednego sygnału, nie dowodu. Wysoki wynik z dowolnego detektora AI, w tym naszego, to powód, by przyjrzeć się bliżej. Sam w sobie nie jest wystarczającą podstawą do sprawy o nieuczciwość akademicką.
- Najpierw odczytaj oczywiste oznaki. Jeśli esej ma sześć frazesów AI, puste zakończenie i zmyślony cytat, to mocniejszy dowód niż jakikolwiek wynik.
- Prowadź rozmowę, a nie przesłuchanie. Poproś ucznia, by przeprowadził Cię przez trzeci akapit. Zapytaj, gdzie znalazł konkretne twierdzenie. Uczeń, który napisał esej, zwykle potrafi odpowiedzieć. Uczeń, który go wkleił, nie potrafi.
- Znaj ryzyko fałszywego alarmu. Liang i in. (2023) wykazali, że detektory GPT oznaczyły 61% esejów TOEFL osób nieanglojęzycznych jako generowane przez AI. Uczniowie z formalnym stylem pisania, ze spektrum autyzmu lub intensywnie używający Grammarly też są narażeni.
- Zbuduj jasne zasady i podziel się nimi pierwszego dnia. Niejednoznaczność tworzy więcej oszustw, niż zapobiega im egzekwowanie.
Szybka lista kontrolna wykrywania
Wydrukuj to. Użyj na każdym eseju, który podejrzewasz.
- Czy długość zdań waha się dziko (5 do 40 słów), czy trzyma się około 18 do 22?
- Ile frazesów AI się pojawia? (zagłębić się, gobelin czegoś, poruszanie się po zawiłościach)
- Czy przykłady są konkretne (nazwani ludzie, daty, źródła), czy niejasne (wielu uważa, badania pokazują)?
- Ile myślników i średników w pierwszych 500 słowach?
- Czy struktura jest sztywno pięcioakapitowa, czy urozmaicona?
- Czy zakończenie coś dodaje, czy tylko powtarza wstęp?
- Czy słyszysz głos ucznia, czy każdy mógłby to napisać?
- Czy analiza schodzi pod powierzchnię, czy zatrzymuje się na opisie?
- Czy możesz zweryfikować każde cytowane źródło?
- Co mówi nasz Detektor AI, gdy wkleisz przykładowy akapit?
Źródła
- Mitchell, E., Lee, K., Khazatsky, A., Manning, C.D., & Finn, C. (2023). DetectGPT: Zero-Shot Machine-Generated Text Detection using Probability Curvature. Stanford University.
- Gehrmann, S., Strobelt, H., & Rush, A.M. (2019). GLTR: Statistical Detection and Visualization of Generated Text. Harvard NLP / MIT-IBM Watson AI Lab.
- Liang, W., Yuksekgonul, M., Mao, Y., Wu, E., & Zou, J. (2023). GPT detectors are biased against non-native English writers. Patterns, Cell Press.
- Crothers, E., Japkowicz, N., & Viktor, H. (2023). Machine-Generated Text: A Comprehensive Survey of Threat Models and Detection Methods. ACM Computing Surveys.
- Stanford Institute for Human-Centered AI (2024). AI in Education: Policy and Practice Brief.