С развитието на големите езикови модели на инструментите с изкуствен интелект, на преподавателите им става все по-трудно да различат дали курсовите работи са написани от техните обучаеми или са генерирани от автоматично. Появиха се някои софтуерни програми като GPTZero, предназначени за разпознаване на подобно съдържание, но разчитането само на тях не е достатъчно и то реално нищо не доказва. Затова при оценка на произхода на текста е необходимо преподавателя внимателно и детайлно да анализира всеки отделен случай.
Списъкът с признаци по които мжое да разпознае автоматично генериран текст по-долу има описателен характер произлезли от практиката – той съдържа наблюдения, а не строги правила. Не всички текстове, притежаващи някои от посочените белези, са непременно генерирани от изкуствен интелект. Това трябва да прецени човека, рецензента и преподавателя. Големите езикови модели, които задействат AI чатботовете, са обучени върху човешко писане и затова често имитират неговите особености.
Изкуственият интелект използва статистически алгоритми, за да предвиди какво следва в текста, базирайки се на голяма обучителна база с данни. В резултат, моделът има склонност да се приравнява към средностатистическото – тоест, резултатът се стреми към най-вероятното изказване, което покрива най-широк кръг от случаи. Това може да бъде както предимство, така и показател, че текстът е генериран от изкуствен интелект.
Например, LLM често се обучават на данни от интернет, където известни личности се описват с положителен и високопарен език. Затова моделът може да пропусне специфични, редки факти и да ги замести с по-общи, позитивни описания. Така конкретният „изобретател устройство“ може да се превърне в „революционен титан на индустрията“.
Характерни езикови и стилови белези
- Акцент върху символиката: Следете за изрази като: „играе жизненоважна/значима/решаваща/ключова роля“, „подчертава значимостта“, „дълбоко вкоренен“, „революционно“ и други подобни.
- Обобщаващи твърдения: LLM често подчертават значението на темата, като добавят твърдения как различни аспекти допринасят за по-широки теми. При биологични теми например, моделите често прекаляват с връзките към екосистемата или околната среда, дори когато са слаби или общи.
- Повърхностни анализи: Пример: „Населението на Дуера е приблизително 56 998 жители, създавайки оживена общност в границите му. Дуера се радва на близост до столицата Алжир, което допълнително засилва значението ѝ като динамичен център на дейност и култура.“
- Промоционален и рекламен език: LLM трудно поддържат неутрален тон, особено при описване на „културно наследство“. Използват думи като „продължава да завладява“, „революционно“, „зашеметяваща природна красота“, „трайно наследство“, „сгушена в сърцето на“, „се гордее с“ и др.
- Създава специфична структура на статиите: Много AI-генерирани статии добавят значителен брой подзаглавия, например включват раздел „Предизвикателства“, започващ с „Въпреки [положителните думи], [темата] се сблъсква с предизвикателства…“, който завършва с неясно позитивна оценка или спекулации за евентуални ползи от текущи или бъдещи инициативи.
- Често използвани думи при AI генерираните текстове са: „Освен това“ (особено в началото на изречение), „се съгласуват с“, „ключови“, „изследвайте“, екосистема, „подчертаване“, „траен“, „усилване“, „взаимодействие“, „сложности“, „пейзаж“ (като абстрактно съществително).
Стил и структурни особености
- AI често използва т.н. Тройно правило: Описания с три прилагателни или съществителни, напр. „Конференцията WordCamp събира глобални SEO професионалисти, маркетингови експерти и growth hackers, за да обсъдят тенденции.“
- Неясни приписвания: Изрази като „научни доклади“, „наблюдатели“, „експерти твърдят“, „някои критици твърдят“.
- Прекомерна генерализация: Обобщаване на мнения от малко или конкретни източници като широко разпространени.
- Прекомерна употреба на удебелен шрифт: Използване на удебелени фрази за прекален технически акцент.
- Емоджита: Честа употреба на емоджита.
- Вертикални списъци с вътрешни заглавия и честа употреба на тирета.
- Малки таблици: Създаване на ненужни малки таблици вместо прозаично изложение.
- Комуникация, предназначена за потребителя: Фрази като „надявам се това да помогне“.
- Връзки към търсения: Включване на излишни или неуместни категории.
- Халюцинации в категориите: LLM могат да измислят несъществуващи категории или да използват остарели или преименувани такива.
- Грешки при цитиране: Невалидни DOI, ISBN, именувани препратки в секцията с препратки, които не се използват в основния текст.
- Внезапна промяна в стила на писане: Рязка промяна към безупречна граматика спрямо останалата комуникация, смесване на формален и неформален стил.
Практически съвет за обучение
Най-добрият начин за проверка при обучаеми е способността им да обяснят собствените си курсови работи. Те трябва да могат да обяснят защо са направили дадена редакция или грешка. Например, ако е вмъкнат измислен URL, можете да попитате как е настъпила объркването, вместо да правите прибързани заключения. Ако обучаемият предостави правилната връзка и я обясни като човешка грешка (например печатна грешка), или сподели съответния пасаж от истински източник, това показва, че става дума за обикновена човешка грешка.