قبولی هوش مصنوعی ChatGPT در آزمون جواز پزشکی آمریکا

گروهی از محققان از ChatGPT خواسته‌اند تا در آزمون جواز پزشکی ایالات متحده آمریکا (USMLE) شرکت کند و این هوش مصنوعی هم در هر سه سطح این آزمون نمره‌ای بین ۵۲.۴ تا ۷۵ درصد کسب کرده است. آزمون USMLE یک امتحان استاندارد سه‌مرحله‌ای است که پزشکان برای دریافت مجوز طبابت باید در آن قبول شوند.

محققان می‌گویند میانگین نمره قبولی برای عبور از این آزمون ۶۰ درصد است و ChatGPT به اولین مدل هوش مصنوعی تبدیل شده که توانسته است در این امتحان سخت موفق شود. گفتنی است که پژوهشگران در انجام این آزمون هیچ کمکی به هوش مصنوعی شرکت OpenAI نکرده‌اند. نتایج این پژوهش پس از همتاداوری در مجله علمی PLoS Digital Health منتشر شده است.

پاسخ‌های ChatGPT حیرت‌آور بودند

محققان با صرف‌نظر از نمره متوسط ChatGPT، از توانایی‌های این ابزار هوش مصنوعی در تولید پاسخ‌های صحیح و کپی‌نشده تعریف کرده‌اند. پژوهشگران می‌گویند این چت‌بات در ۸۸.۹ درصد از پاسخ‌های خود داده‌های جدیدی را ارائه کرده است که از نظر پزشکی صحیح‌اند. این ابزار همچنین قابلیت‌های استدلال استنتاجی، زنجیره فکری و مهارت‌های قابل‌اتکایی را از خود به نمایش گذاشته است.

این یافته‌ها ظاهراً منحصر به ChatGPT و سبک خاص یادگیری این هوش مصنوعی است. مدل OpenAI برخلاف مدل‌های دیگری که از یادگیری عمیق استفاده می‌کردند، با کمک مدل‌های زبانی بزرگ تمرین داده شده است تا براساس بافت کلمات قبلی دنباله‌ای از واژه‌ها را پیش‌بینی کند. به عبارت دیگر، ChatGPT می‌تواند جمله‌هایی بسازد که پیش‌تر توسط الگوریتم دیده نشده‌اند ولی همچنان منطقی به‌نظر می‌رسند.