Technologia

Humor ChatGPT nie jest jeszcze całkiem ludzki, wynika z badań

  • 11 czerwca, 2023
  • 4 min read


ChatGPT jest znany ze swojej zdolności do generowania tekstu, który odzwierciedla ludzką rozmowę, co czyni go powszechnie stosowanym narzędziem w różnych branżach, w tym w marketingu cyfrowym.

Jednak ostatnie badanie podaje w wątpliwość zdolność modelu do generowania i rozumienia humoru, kluczowego elementu angażowania i łączenia się z publicznością.

Badania przeprowadzone przez niemieckich badaczy Sophie Jentzsch i Kristiana Kerstinga sugerują, że chociaż ChatGPT wyróżnia się w niektórych obszarach, ma znaczne ograniczenia w generowaniu oryginalnego humoru.

Śmiech z recyklingu: kwestia oryginalności

Badanie przeprowadzone przez Cornell University ma na celu odpowiedź na pytanie: „Jak model sztucznej inteligencji radzi sobie z humorem?”

Naukowcy badają oryginalność humoru generowanego przez sztuczną inteligencję, zdolność ChatGPT do rozumienia i wyjaśniania żartów oraz jego sprawność w wykrywaniu humoru.

Zespół badawczy stwierdza w swoim raporcie:

„Odkryliśmy, że więcej niż 90% wygenerowanych próbek były te same 25 żartów. Ta powtarzalność sugeruje, że te żarty nie są pierwotnie generowane, ale są wyraźnie uczone i zapamiętywane podczas treningu modelowego”.

Naukowcy doszli do wniosku, że odpowiedzi te prawdopodobnie zostały nauczone i zapamiętane podczas szkolenia modelu AI, co wskazuje na ograniczenie zdolności modelu do generowania oryginalnego humoru.

Warto przeczytać!  5 najlepszych bohaterów Overwatch 2 do duetu z Wrecking Ball

W raporcie naukowcy wyszczególnili 10 najczęściej generowanych żartów, w tym klasyki, takie jak „Dlaczego strach na wróble zdobył nagrodę? Bo był wybitny w swojej dziedzinie”.

Oprócz ujawnienia złożonego sposobu, w jaki sztuczna inteligencja radzi sobie z humorem, badanie służy jako ostrzeżenie dla osób, które chcą wykorzystać ChatGPT do tworzenia treści o humorystycznym charakterze.

Konsekwencje dla marketerów cyfrowych, którzy polegają na sztucznej inteligencji do generowania treści, są jasne – podczas gdy modele AI, takie jak ChatGPT, mogą powielać wcześniej wyuczone wzorce w celu tworzenia żartów, brakuje im oryginalności.

Pomimo powtarzalności niewielka liczba wygenerowanych odpowiedzi była unikatowa. Jednak zostały one w dużej mierze stworzone przez połączenie elementów z różnych znanych dowcipów i nie zawsze miały sens.

Wyjaśnienie żartu: poza humorem powierzchniowym

W badaniu zbadano dalej zdolność ChatGPT do wyjaśnienia humoru, co wymaga głębszego zrozumienia struktury żartu i implikacji.

Chociaż model mógł dekonstruować i wyjaśniać elementy stylistyczne, takie jak personifikacje i gry słowne, wykazywał ograniczenia w konfrontacji z bardziej niekonwencjonalnymi żartami.

Zespół zaobserwował:

„ChatGPT stara się wyjaśnić sekwencje, które nie pasują do wyuczonych wzorców. Nie wskaże, kiedy coś nie jest zabawne lub nie ma ważnego wyjaśnienia”.

W przypadkach, gdy ChatGPT nie mógł zidentyfikować nieśmiesznych żartów, wymyślił wiarygodnie brzmiące wyjaśnienia.

Warto przeczytać!  PlayStation Showcase 2023: Pięć najważniejszych ujawnień, które wstrząsnęły światem gier

W przypadku marketerów, którzy chcą zaangażować odbiorców za pomocą wyrafinowanego humoru, poleganie wyłącznie na sztucznej inteligencji może nie przynieść pożądanych rezultatów.

Wykrywanie żartów: dekodowanie puenty

Oprócz generowania i wyjaśniania żartów zespół badawczy przetestował zdolność ChatGPT do wykrywania humoru.

Odkryli, że chociaż model może poprawnie identyfikować żarty na podstawie struktury, gry słownej i tematu, nie udało mu się zaklasyfikować zdania jako żartu, jeśli ma tylko jedną z tych cech.

To podkreśla zależność modelu od wyuczonych wzorców i brak bardziej wszechstronnego zrozumienia humoru.

Co to oznacza dla marketerów?

Chociaż ChatGPT zrewolucjonizował dziedzinę treści generowanych przez sztuczną inteligencję, to badanie sugeruje ostrożność, polegając na modelu generowania humoru.

Badanie kończy się:

„Chociaż żarty ChatGPT nie są generowane od nowa, niekoniecznie odbiera to możliwości systemu… Jednak to, czy sztuczny agent jest w stanie zrozumieć, czego się nauczył, jest wyjątkowo trudnym pytaniem”.

Ponieważ marketerzy cyfrowi oczekują, że sztuczna inteligencja zróżnicuje i rozszerzy ich ofertę treści, konieczne jest zrozumienie ograniczeń i mocnych stron modelu. W dziedzinie humoru, przynajmniej na razie, ludzka kreatywność JEST niezastąpiona.

Warto przeczytać!  Firma Samsung Electronics prezentuje na targach CES nowe linie monitorów Odyssey, ViewFinity i Smart Monitor, zapoczątkowując nową generację technologii wyświetlania

Zespół badawczy planuje przeprowadzić podobne badania na nowo wydanych modelach sztucznej inteligencji, takich jak LLaMa i GPT-NeoX, obiecując dalszy wgląd w świat humoru obliczeniowego.


Wyróżniony obraz wygenerowany przez autora za pomocą Midjourney.




Źródło