خبر کامل
تحقیقات جدید: توهم در مدلهای هوش مصنوعی پیشرفته

تحقیقات جدید نشان میدهد هرچه مدلهای هوش مصنوعی پیشرفتهتر میشوند، بیشتر دچار «توهم» شده و اطلاعات نادرست میدهند. آیا این مشکل حلشدنی است یا باید آن را ویژگی طبیعی هوش مصنوعی بدانیم؟
نتایج جدیدترین o3 و o4-mini که برای استدلال و پاسخدهی دقیق توسعه یافتهاند، نسبت به مدلهای قدیمیتر بیشتر دچار توهم میشوند. طبق بررسیهای OpenAI با استفاده از بنچمارک PersonQA، مدل o3 در 33 درصد مواقع و مدل o4-mini در 48 درصد مواقع اطلاعات نادرست دادهاند؛ آماری که بیش از 2 برابر نرخ توهم مدل قدیمیتر o1 است.
یافتههای OpenAI نگرانیهای جدیدی درباره صحت و اعتماد به مدلهای زبانی بزرگ (LLM) مثل چتباتهای هوش مصنوعی ایجاد کرده است. «النور واتسون»، مهندس اخلاق هوش مصنوعی و عضو مؤسسه IEEE، به
او تأکید کرده مشکل توهم هوش مصنوعی در مدلهای زبانی لزوم نظارت دقیق بر خروجی آنها را بیشتر میکند، مخصوصاً زمانی که این خروجیها در تصمیمگیریهای مهم نقش دارند.
مدلهای استدلالگر (Reasoning Models) بهجای اتکا به احتمالات آماری، درست مانند ذهن انسان، سعی میکنند مسائل پیچیده را به اجزای سادهتر تقسیم کنند و راهحلهای خلاقانهای برای آنها بیابند.
به گفته کارشناسان، همین فرایند استدلال نیز نیازمند «توهم» است؛ تولید محتواهایی که لزوماً در دادههای ورودی وجود ندارند.
او در ادامه میگوید اگر هوش مصنوعی صرفاً اطلاعات دادههای آموزشی خود را بازتولید میکرد، عملاً فقط موتور جستجوست و نمیتوانست کدی بنویسد که پیشتر وجود نداشته یا شعری بگوید که مفهومی کاملاً نو داشته باشد.
بهعبارتدیگر، او ادعا کرده توهم همان عنصر خلاقیت در هوش مصنوعی است؛ مشابه رؤیا در انسان که امکان تخیل و نوآوری را فراهم میکند.
هرچند توهم میتواند به خلق ایدههای جدید کمک کند، در مواردی که دقت اطلاعات بسیار مهم است (مثلاً در حوزههای پزشکی، حقوق یا امور مالی)، میتواند بسیار خطرناک باشد. واتسون میگوید:
او در ادامه گفته است:
او همچنین هشدار داد با پیشرفت مدلها، مسئله تشخیص خطا نیز دشوارتر میشود:
کازرونیان نیز این دیدگاه را تأیید کرده و میگوید:
نکته قابلتوجه دیگر اینکه هنوز مشخص نیست مدلهای زبانی بزرگ (LLMs) دقیقاً چگونه به پاسخ میرسند؛ موضوعی که شباهت زیادی به درک ناقص ما از مغز انسان دارد.
«داریو آمودی»، مدیرعامل شرکت Anthropic،
به گفته کازرونیان، پیامدهای تولید اطلاعات نادرست بهواسطه توهم هوش مصنوعی بسیار جدی هستند:
این ۲ کارشناس (کازرونیان و واتسون) در گفتگو با Live Science تأکید کردهاند حذف کامل توهم در مدلهای هوش مصنوعی ممکن است بسیار سخت باشد اما راههای سادهتری برای کاهش آن وجود دارد.
واتسون پیشنهاد کرده استفاده از تکنیک
واتسون همچنین معتقد است مدلها باید طوری طراحی شوند که بتوانند تردید خود را تشخیص دهند:
درنهایت، کازرونیان در مقام جمعبندی میگوید، باتوجهبه اینکه جلوگیری از توهم بسیار دشوار است، در مدلهای پیشرفته، باید اطلاعات ساخته هوش مصنوعی را «با همان میزان از تردیدی که به انسانها داریم، بررسی کنیم.»
درباره هوشمصنوعی دستاول:
تمامی اخبار دستاول توسط دستیار هوش مصنوعی «هوشنگ» پردازش، صحتسنجی، خلاصه و بازنویسی شده است. هوشنگ هر روز با دادههای جدید آموزش داده میشود و با نظارت دقیق انسانی و سردبیری دستاول در حال بهتر شدن است.
شما میتوانید از چتبات و سایر ابزارهای هوشنگ به صورت رایگان استفاده کنید.
زمان انتشار:
۱۷:۳۰ - ۱۴۰۴/۰۴/۰۴