در طول آزمایش، ۹۰ درصد از ۱۰۰۸ جوک تولید شده با ۲۵ جوک مطابقت داشت و آن‌ها را به این نتیجه رساند که پاسخ‌هایی که در طول آموزش هوشمند به مدل هوش مصنوعی داده شده و به خاطر سپرده شده‌اند، بازخورد مطالعات قبلی است نه اینکه تازه ایجاد شده باشند.

بر اساس گزارش "ARC Technica"، این مطالعه بر روی نسخه ۳.۵ چت GPT، یعنی نسخه قبل از نسخه‌ای که اکنون در اینترنت وجود دارد، انجام شد. طی این فرآیند یک سری آزمایش انجام شد که بر روی ایجاد، توضیح، و تشخیص جوک‌ها تمرکز داشته است. آن‌ها این آزمایش‌ها را با تحریک ChatGPT بدون دسترسی به عملکرد درونی مدل یا مجموعه داده‌ای که برای آموزش آن استفاده می‌شد، انجام دادند.

لیست ۱۰ جوک برتر با تعداد برداشت دقیق (از ۱۰۰۸ نسخه):

سوال: چرا مترسک جایزه گرفت؟ (۱۴۰)

جواب:، چون در رشته خود برجسته بود.

س: چرا گوجه فرنگی قرمز شد؟ (۱۲۲)

ج:، چون سس سالاد را دید.

س: چرا کتاب ریاضی غمگین بود؟ (۱۲۱)

ج:، چون مشکلات زیادی داشت.

س: چرا دانشمندان به اتم‌ها اعتماد ندارند؟ (۱۱۹)

پاسخ:، زیرا آن‌ها همه چیز را تشکیل می‌دهند.

س: چرا کوکی به دکتر رفت؟ (۷۹)

پاسخ:، چون احساس شکننده بودن داشت.

س: چرا دوچرخه به تنهایی نمی‌توانست بایستد؟ (۵۲)

ج:، چون آن دو چرخ داشت.

س: چرا قورباغه با شرکت بیمه خود تماس گرفت؟ (۳۶)

ج:، چون او در ماشینش پرش داشت.

س: چرا مرغ از زمین بازی عبور کرد؟ (۳۳)

پاسخ: برای رسیدن به اسلاید دیگر.

س: چرا کامپیوتر سرد بود؟ (۲۳)

پاسخ:، چون ویندوزش را باز گذاشته بود.

س: چرا هیپستر زبانش سوخت؟ (۲۱)

ج:، چون قبل از سرد شدن قهوه اش را نوشید.

محققان خاطرنشان کردند که تمرکز GPT Chat بر درک محتوا و معنای آن در طنز نشان دهنده پیشرفت در درک جامع طنز در مدل‌های زبانی است.

این مطالعه نشان می‌دهد که مشاهدات ثبت‌شده تأیید می‌کنند چت GPT در واقع الگوی خاصی از جوک‌ها را به جای قابلیت خنده‌دار بودن آموزش می‌دهد. با این حال، در ایجاد، توضیح و تعریف جوک، GPT Chat به جای ویژگی‌های سطحی، بر محتوا و معنا تمرکز می‌کند.

از این ویژگی‌ها می‌توان برای افزایش کاربرد‌های شوخ طبعی محاسباتی استفاده کرد. در مقایسه با مدل‌های زبان قبلی، این می‌تواند جهشی بزرگ به سوی درک جامع طنز در نظر گرفته شود.