Biblię napisała sztuczna inteligencja? Tak twierdzi OpenAI

Choć ChatGPT, czyli chatbot stworzony przez firmę OpenAI, cieszy się sporą popularnością, spotkał się już ze krytyką. Po pierwsze ze względu na to, że w trakcie pracy nad sztuczną inteligencją wyzyskiwano i wykorzystywano Kenijczyków. Po drugie chodzi o nadużywanie chatbota przez uczniów i studentów.

ChatGPT został już nawet zakazany w szkołach w Nowym Jorku, bo pisał za uczniów sprawdziany. Natomiast w Australii uczelnie powracają do prac i testów pisanych odręcznie z obawy przed oszustwami. W związku z tym OpenAI zdecydowało się na opracowanie narzędzia, które będzie sprawdzało, czy dany tekst został napisany przez sztuczną inteligencję czy człowieka.

AI Classifier ocenia, czy teksty zostały napisane przez sztuczną inteligencję

31 stycznia OpenAI udostępniło narzędzie o nazwie AI Classifier, które sprawdza, czy dany fragment tekstu został napisany przez sztuczną inteligencję czy człowieka. Program ma pomóc nauczycielom w sprawdzaniu, czy zaliczenie testu czy praca pisemna została napisana przez uczniów czy przez ChatGPT. Dodatkowo, ma przeciwdziałać sianiu dezinformacji.

Niestety, sami twórcy na stronie OpenAI przyznają, że narzędzie nie jest niezawodne. Według tekstów przeprowadzonych przez firmę, AI Classifier było w stanie poprawnie zidentyfikować jedynie 26 proc. tekstów napisanych przez sztuczną inteligencję. OpenAI zdecydowało się jednak na udostępnienie niedoskonałego narzędzia, by sprawdzić, czy nawet takie nieidealne rozwiązanie może okazać się przydatne.

"Nasz klasyfikator nie jest w pełni wiarygodny. Według naszych testów tekstów napisanych w języku angielskich, nasz klasyfikator poprawnie identyfikuje 26 proc. próbek tekstów napisanych przez sztuczną inteligencję i określa je jako "prawdopodobnie napisane przez SI". Z drugiej strony, 9 proc. próbek testów napisanych przez człowieka ocenianych jest jako napisane przez SI" - czytamy na stronie openai.com

Kolejną wadą narzędzia, wymienianą przez OpenAI na stronie jest to, że AI Classifier zdecydowanie gorzej działa w przypadku krótkich tekstów, które mają mniej niż tysiąc znaków. Dodatkowo firma zaleca, by używać narzędzia jedynie do sprawdzania tekstów w języku angielskim i sama zaznacza, że program może się mylić.

Potwierdzają to internauci, którzy już przetestowali narzędzie. Użytkownik Twittera, Sam Biddle, wrzucił do narzędzia fragment tekstu Biblii. Według AI Classifier zamieszczony przez twitterowicza fragment Biblii prawdopodobnie został wygenerowany przez sztuczną inteligencję.

"Buzzfeed" w ramach testu poprosił ChatGPT o napisanie trzech tekstów po 300 słów, a następnie użył narzędzia OpenAI do sprawdzenia ich wiarygodności. Narzędzie było przekonane o tym, że teksty zostały napisane przez sztuczną inteligencję tylko w przypadku jednej próbki tekstu. W pozostałych przypadkach AI Classifier albo nie był pewny, czy artykuł został wygenerowany przez ChatGPT, albo wątpił w to, że został napisany przez sztuczną inteligencję.

Wychodzi więc na to, że wciąż nie będziemy mogli do końca stwierdzić, czy dany tekst został wygenerowany przez sztuczną inteligencję, czy może odpowiada za niego człowiek. Miejmy jednak nadzieję, że OpenAI wkrótce opracuje znacznie lepsze, bardziej skuteczne narzędzie.

Źródło: Buzzfeed, OpenAI