Sztuczna inteligencja pisze prace za studentów?
Narzędzia do automatycznego generowania tekstu są coraz bardziej popularne ze względu na łatwość w obsłudze i możliwości, które oferują użytkownikom. Korzystanie z pomocy „maszyn” przy pisaniu tekstów, w szczególności jako wsparcie przy poprawie jakości i poprawności treści, zwiększa zapotrzebowanie na takie programy. Tworzenie tekstów przez narzędzia sztucznej inteligencji może zwiększać produktywność i kreatywność użytkowników. Zdarzają się jednak próby generowania całości lub znacznej części tekstu i podpisywania go swoim nazwiskiem. Takie działania wzbudzają kontrowersje.
Narzędzia takie jak ChatGPT są popularne także wśród studentów, jednak nie istnieją jeszcze dane na temat skali tego zjawiska. Nauczyciele akademiccy zgłaszali zapotrzebowanie na narzędzie, które pozwoliłoby im sprawdzić, czy student korzystał z pomocy sztucznej inteligencji przy pisaniu pracy. W tym celu właśnie eksperci Ośrodka Przetwarzania Informacji rozbudowali Jednolity System Antyplagiatowy.
– Jednolity System Antyplagiatowy (JSA) to nowoczesne narzędzie, które powstało w odpowiedzi na oczekiwania polskiej kadry akademickiej i uporządkowało rynek antyplagiatowy w Polsce. Wcześniej istniało wiele programów, opartych na różnych algorytmach i referencyjnych bazach danych. Dzięki oddaniu JSA do dyspozycji promotorów w 2019 roku, wszystkie prace inżynierskie, licencjackie, magisterskie i doktorskie są analizowane za pomocą tego samego narzędzia. Dzięki wprowadzeniu JSA, zapewniliśmy większą niż w latach wcześniejszych porównywalność wyników weryfikacji oryginalności prac dyplomowych pomiędzy wszystkimi ośrodkami z całej Polski. Niedawno jednak pojawiło się nowe wyzwanie, jakim jest wzrastająca popularność narzędzi do automatycznego generowania treści. Dlatego niezwłocznie przystąpiliśmy do pracy, aby dodać do JSA funkcję, która pomoże promotorom w identyfikacji, czy dana praca dyplomowa została napisana przy pomocy narzędzi takich jak choćby popularny ChatGPT – mówi dr inż. Jarosław Protasiewicz, dyrektor Ośrodka Przetwarzania Informacji
Jeszcze w 2016 roku zaledwie 30-40 proc. prac dyplomowych było analizowanych pod kątem plagiatu. Od 2019 roku takim obowiązkiem objęte są wszystkie prace. System jest stale rozwijany przez ekspertów OPI, którzy pracują nad jego rozbudową i modernizacją. Dodanie modułu, który pomaga w tekście wykryć fragmenty napisane przy pomocy sztucznej inteligencji ma pomóc w walce z plagiatami.
Jak JSA wykrywa zastosowanie sztucznej inteligencji?
Nie jest to ostatnie słowo ekspertów z OPI odpowiedzialnych za JSA. Cały czas rozwijają oni narzędzia do detekcji tekstu napisanego przez AI. Wraz z rozwojem nowych możliwości zastosowania sztucznej inteligencji do opracowywania różnych treści i analiz, będą pojawiać się również nowsze rozwiązania do ich wykrywania. Eksperci OPI udoskonalają system – wdrażając zarówno gotowe rozwiązania, jak i narzędzia opracowane w OPI. Obecnie trwa zbierania informacji od użytkowników JSA z całej Polski na temat nowego rozwiązania. Takie badanie pomoże ekspertom OPI wprowadzić nowe funkcje w JSA, które jeszcze efektywniej będą wspierać pracę promotorów.
Metoda detekcji wdrożona do systemu JSA opiera się na hipotezie, że im większa regularność w tekście, tym jest większe prawdopodobieństwo, że został on wytworzony przez model językowy. Założenie takie ma swoje źródło w zastosowanym algorytmie, który jest w stanie wygenerować tekst regularny i przewidywalny.
– Model zastosowany w JSA został przeszkolony na dużym zbiorze danych tekstowych. Jego działanie najprościej wytłumaczyć stosując miarę Perplexity. Zgodnie z naszymi założeniami, tekst wytworzony przez losowy dobór słów powinien charakteryzować się wysoką wartością Perplexity, natomiast tekst bardzo szablonowy i przewidywalny niską wartością Perplexity. W przypadku tego ostatniego właśnie istnieje zasadne podejrzenie, że powstał on przy użyciu sztucznej inteligencji. Stale rozwijamy nasz system i słuchamy głosów ze środowiska akademickiego. Poszerzamy liczbę baz referencyjnych i zapewniamy większe umiędzynarodowienie naszego narzędzia. Oczywiście JSA nie daje stuprocentowej pewności, że tekst jest plagiatem lub został napisany przez sztuczną inteligencję – określa wyłącznie prawdopodobieństwo. Dlatego zawsze ostateczna decyzja należy do promotora. To on weryfikuje raport otrzymany z JSA i stwierdza, czy dana praca dyplomowa jest oryginalna – mówi Małgorzata Wartacz, kierowniczka projektu JSA w OPI, który odpowiada za rozwój systemu.
Warto podkreślić, że na razie na rynku nie istnieje żadne rozwiązanie, które lepiej pomogłoby udzielić odpowiedzi na pytanie – czy tekst został napisany przez sztuczną inteligencję? Nawet twórcy technologii ChatGPT nie mają takiego narzędzia, które byłoby w stanie dokładnie ocenić czy praca została napisana przez bota, czy przez człowieka.
JSA – ponad 400 instytucji i 100 000 użytkowników
JSA dostępny jest w każdej instytucji w Polsce uprawnionej do nadawania tytułu zawodowego lub stopnia naukowego. W ciągu czterech lat od uruchomienia JSA w styczniu 2019 roku za pomocą systemu przebadano już około 1,5 mln prac dyplomowych. Średnio na jednego promotora przypada 12 takich prac. Ponad 440 instytucji używało JSA od momentu uruchomienia systemu i ma on już ponad 100 000 użytkowników. System OPI stanowi realne wsparcie dla pracy każdego promotora w Polsce. O znaczeniu wpływu JSA na cały system szkolnictwa wyższego najlepiej świadczą dotychczasowe statystyki. Dotychczas ponad 320 000 prac, które zostały uznane przez system za potencjalne plagiaty, nie zostało zaakceptowanych przez promotorów. Oznacza to, że JSA pomógł zapobiec ponad 320 000 nadużyć, polegającym na nieprzestrzeganiu prawa autorskiego.
Ważne jest, aby studenci zdawali sobie sprawę z powagi oszustwa, jakim jest plagiat i respektowali zasady etyczne obowiązujące na uczelniach. Instytucje edukacyjne natomiast muszą być konsekwentne w egzekwowaniu regulaminów, aby zagwarantować uczciwość akademicką. Plagiat na studiach jest poważnym naruszeniem zasad etycznych i regulaminów akademickich. Jego skutki mogą pociągać za sobą poważne konsekwencje dla studenta, łącznie z wydaleniem ze studiów i niedopuszczeniem do obrony. Plagiat z użyciem sztucznej inteligencji jest trudniejszy do wykrycia i prowadzi do utraty indywidualności oraz oryginalności prac dyplomowych. Może on przyczyniać się do rozprzestrzeniania fałszywych lub niezweryfikowanych informacji oraz wyciągania wniosków naukowych w oparciu o nieprawdziwe dane. Dodanie przez ekspertów OPI nowej funkcji w JSA, która pozwala stwierdzić, że dany tekst prawdopodobnie został napisany przy pomocy sztucznej inteligencji, jest bezsprzecznie ważnym etapem w walce z plagiatami.
