ChatGPT زود پیر شد!

پژوهشگران دانشگاه استنفورد و کالیفرنیا برکلی با مقایسه عملکرد مدل های زبانی بزرگ GPT-3.

5 و GPT-4 توسعه یافته توسط شرکت OpenAI ادعا می کنند که عملکرد و دقت ربات گفتگوگر ChatGPT در طول زمان کاهش یافته است.

- پژوهشگران دانشگاه استنفورد و کالیفرنیا برکلی با مقایسه عملکرد مدل های زبانی بزرگ GPT-3.

5 و GPT-4 توسعه یافته توسط شرکت OpenAI ادعا می کنند که عملکرد و دقت ربات گفتگوگر ChatGPT در طول زمان کاهش یافته است.

به گزارش سایت قطره و به نقل ازایسنا و به نقل از استنفورد، به نظر می رسد که مرحله ماه عسل برای مدل های زبانی بزرگ(LLM) که با عجله برای نفوذ به فضای هوش مصنوعی مولد معرفی شدند، به پایان رسیده است، چرا که بر اساس مطالعه ای که توسط پژوهشگران دانشگاه استنفورد و کالیفرنیا برکلی انجام شده، عملکرد مدل های زبانی بزرگ شرکت OpenAI در طول زمان به طور قابل توجهی کاهش یافته است.

پژوهشگران با توجه به این که این مدل ها می توانند بر اساس داده ها، بازخورد کاربران و تغییراتِ طراحی، به روز شوند، می خواستند ببینند که آیا این مدل های زبانی بزرگ در حال بهبود هستند یا نه؟ این تیم رفتار نسخه های عرضه شده در ماه مارس 2023 و ماه ژوئن 2023 از مدل های GPT-3.

5 و GPT-4 را در چهار وظیفه ارزیابی کردند.

اولی حل مسائل ریاضی، دومی پاسخ دادن به سوالات حساس یا خطرناک، سومی تولید کد و چهارمی ارزیابی مدل ها در استدلال