کارنامه یکی از داوطلبان ساعی کنکور تجربی در یکی از آزمون‌های آزمایشی جامع پاییزی، حاوی نکته‌ای تکان‌دهنده بود: درصدهای درس زیست‌شناسی و شیمی او به شکل غیرمنتظره‌ای ۲۰ درصد افت کرده بود. در بررسی علت این سقوط، مشخص شد که این دانش‌آموز برای رفع اشکال تست‌های چالشی، به یک چت‌بات عمومی شناخته‌شده (ChatGPT) مراجعه کرده بود. چت‌بات با لحنی فوق‌العاده متین، استدلالی چندپارگرافی و ظاهراً علمی در اثبات درستی یک گزینه نوشته بود؛ استدلالی که داوطلب را مجاب کرده بود نظر استاد خود را نادیده بگیرد. اما کلید رسمی سازمان سنجش دقیقاً برعکس آن پاسخ بود. این رویداد یک اتفاق تصادفی نیست؛ بلکه نمونه‌ای شفاف از پدیده‌ای خطرناک به نام «توهم مؤدبانه و بااعتمادبه‌نفس» (Polite & Confident Hallucination) در مدل‌های زبانی عمومی است. در این مقاله تخصصی، کالبدشکافی خواهیم کرد که چرا هوش مصنوعی‌های عمومی اینترنت در برابر سوالات زیست و شیمی کنکور ایران خلع سلاح میشوند و چگونه این نقص محاسباتی تراز داوطلبان را ویران میکند.
زیست کنکور؛ نبرد کلمه‌ها، نه دانش عمومی وب
بسیاری از داوطلبان گمان می‌کنند هوش مصنوعی چون به میلیاردها صفحه کتاب، مقاله و پایگاه داده دسترسی دارد، دانای کل است. اما حقیقت این است که بزرگ‌ترین نقطه قوت هوش مصنوعی در محیط عمومی وب، در کنکور سراسری به پاشنه آشیل مرگبار آن بدل میشود.
تفاوت «علم زیست‌شناسی عمومی وب» با «چارچوب مصوب کتاب درسی ایران»
طراح تست کنکور سراسری تعهدی به آخرین مقالات منتشرشده در پایگاه‌های Nature یا Science ندارد. مبنای طراحی سوال و تنها مرجع مورد استناد در بررسی اعتراضات کلید در سازمان سنجش، فقط و فقط متن، شکل‌ها، جدول‌ها و حتی فعالیت‌های کتب درسی پایه‌های دهم، یازدهم و دوازدهم نظام جدید است.
کتب درسی به دلایل آموزشی، برخی مفاهیم بیولوژیک را ساده‌سازی کرده یا دایره مصادیق را محدود به موارد ذکرشده در کتاب نموده‌اند. مدل‌های زبانی خارجی که روی حجم عظیمی از داده‌های آکادمیک انگلیسی آموزش دیده‌اند، از این مرزهای دقیق مصوب هیچ درکی ندارند. وقتی از یک مدل عمومی درباره سازوکار یک هورمون یا آناتومی یک جانور سوال می‌پرسید، مدل اطلاعات دانشگاهی و تبصره‌های علم روز را فراخوانی میکند؛ اطلاعاتی که در جلسه کنکور نه تنها نمره‌ای نمی‌آورد، بلکه شما را مستقیماً به دام تله‌های گزینه‌های انحرافی می‌اندازد!
سلاح پنهان طراحان: بازی با قیدهای «همه، اغلب، برخی، به ندرت، فقط»
سنگین‌ترین بخش سوالات زیست کنکور تجربی، تست‌های قیددار است. در کتاب‌های زیست‌شناسی نظام جدید، تفاوت میان واژه «اغلب» با «همه» یا «برخی»، مرز میان یک گزاره کاملاً صحیح با یک دروغ محض علمی است.
مدل‌های عمومی زبانی ذاتاً برای تولید جملات روان انسانی ساخته شده‌اند و به کلمات بر پایه اهمیت گرامری وزن می‌دهند، نه بر اساس حساسیت حقوقی یک آزمون تستی! این مدل‌ها قیدها را به سادگی نادیده می‌گیرند، واژه «اغلب» را معادل «همه» تلقی می‌کنند یا استثنائات ناشناخته بین‌المللی را به عنوان نقض‌کننده قیدهای صریح کتاب درسی وارد تحلیل می‌نمایند. نتیجه چنین پردازشی، تولید تحلیلی است که ظاهر علمی بی‌نقصی دارد، اما در کنکور نمره منفی مستقیم تولید میکند.
کابوس تست‌های شمارشی: خطای تصاعدی مدل‌های متنی
در تست‌های شمارشی کنکور («چند مورد از عبارات زیر درباره گیرنده‌های نوری صحیح است؟»)، داوطلب با ۴ یا ۵ گزاره مستقل روبروست. برای حل صحیح این تست، هر ۵ گزاره باید با دقت ۱۰۰ درصدی ارزیابی شوند.
اگر فرض کنیم یک هوش مصنوعی عمومی در تشخیص درستی هر گزاره قیدی، ۸۰ درصد دقت داشته باشد (که فرض خوش‌بینانه‌ای است)، احتمال پاسخگویی درست به یک تست شمارشی ۴ موردی از طریق ضرب احتمالات محاسبه میشود:
$$\text{احتمال حل صحیح} = 0.8 \times 0.8 \times 0.8 \times 0.8 = 0.4096 \approx 41\%$$ این یعنی دقت مدل عمومی در تست‌های شمارشی به حدود ۴۱ درصد سقوط میکند؛ عددی فاجعه‌بار که حتی از پرتاب تصادفی سکه نیز نامطمئن‌تر است! یک لغزش کوچک در یک قید یک‌کلمه‌ای در گزاره سوم، کل زحمت تست را با نمره منفی بر باد می‌دهد.
پاشنه آشیل شیمی؛ از استوکیومتری تا ساختارهای فضایی
اگر در زیست‌شناسی بازی کلمات و قیدها سد راه مدل‌های عمومی است، در شیمی کنکور ناتوانی در موازنه‌های چندمرحلهای و تعارض روندهای جدول تناوبی است که چت‌بات‌ها را فلج میکند.
خواندن مسئله استوکیومتری به جای حل آن
مدل‌های زبانی عمومی برای حل مسائل عددی چندگامی (Multi-step Numerical Reasoning) طراحی نشدهاند. در یک مسئله ترکیبی استوکیومتری و بازده درصدی شیمی دوازدهم، داوطلب ابتدا باید معادله واکنش را موازنه کند، ماده محدودکننده (Limiting Reactant) را شناسایی کند، ناخالصی نمونه را در محاسبات دخالت دهد و سپس جرم یا حجم گاز را در شرایط غیر STP به دست آورد.
چتباتهای متداول این مسئله‌ها را مانند یک متن انشایی می‌خوانند. آن‌ها اعدادی را در یکدیگر ضرب و تقسیم می‌کنند که به دلیل عدم حفظ پیوستگی موازنه و فراموشی ضریب کسر تبدیل، به یک عدد نهایی موهومی می‌رسد. جالب اینجاست که چت‌بات محاسبات غلط خود را با اطمینان کامل تا چند رقم اعشار ادامه می‌دهد و گزینه‌ای را به عنوان پاسخ اعلام میکند که تصادفاً در میان گزینه‌ها به عنوان تله طراح وجود دارد!
تله‌های جدول تناوبی و روندهای استثنای نظام جدید
کتاب درسی شیمی دهم و یازدهم برای برخی مفاهیم جدول تناوبی، از الگوهای ساده‌شده خاصی پیروی میکند. به عنوان مثال، در تغییرات شعاع اتمی، انرژی نخستین یونش، واکنش‌پذیری فلزات و روندهای گروه‌های ۱۴ تا ۱۷، کتاب درسی مرزهایی مشخص تعیین کرده است. مدل‌های عمومی به دلیل دسترسی به جداول تناوبی پیشرفته و داده‌های کریستالوگرافی، گاه استثنائاتی را وارد مسئله می‌کنند که در کتاب درسی نظام جدید به صراحت نادیده گرفته شده یا به گونه دیگری تعریف شده است.
تصاویر و شکلهای کتاب درسی؛ بن‌بست بزرگ مدل‌های متنی
یکی از ویژگی‌های بارز کنکورهای اخیر تجربی، تمرکز سنگین طراحان بر روی تصاویر، نمودارها و زیرنویس شکلهای کتاب درسی است. بیش از ۳۰ درصد سوالات زیست‌شناسی مستقیماً به جزئیاتی متصل هستند که هرگز در متن اصلی کتاب نوشته نشدهاند، بلکه فقط در تصویر رسم شده‌اند:
- جهت جریان خون در سیاهرگ‌ها و دریچه‌های لانه کبوتری در آناتومی دهم.
- موقعیت قرارگیری گیرنده‌های چشایی روی زبان و انشعابات عصبی آن‌ها در شکل زیست یازدهم.
- جهتگیری فلش‌های چرخه کالوین و انتقال الکترون در میتوکندری و کلروپلاست زیست دوازدهم.
- موقعیت دقیق پیوندهای هیدروژنی و انتهای ۳ پرایم و ۵ پرایم در ساختار tRNA.
یک مدل هوش مصنوعی عمومی متنی، از این جزئیات بصری کاملاً بی‌خبر است. وقتی دانش‌آموز متنی پیرامون این مفاهیم تایپ میکند، مدل چون تصویری از کتاب را در حافظه تخصصی خود ندارد، بر اساس داده‌های متنی عمومی حدس می‌زند و در نتیجه تله‌های پنهان درون شکل را از دست می‌دهد.
راهکار نکتانو؛ تفاوت یک پایگاه دانش محلی با اینترنت آزاد
نکتانو برای درمان ریشه‌ای این آسیب‌ها، رویکرد متفاوتی را در پیش گرفت: قطع وابستگی به داده‌های رهای اینترنت و ساخت یک پایگاه دانش محلی و اختصاصی (RAG & Knowledge Base) منطبق بر چارچوب آموزشی ایران.
نکتانو چگونه خطاهای زیست و شیمی را مهار میکند؟
- نمایه‌سازی سطر به سطر و کلمه به کلمه: متن کتب دهم تا دوازدهم با برچسب‌گذاری قیدها و استثناها به صورت برداری در نکتانو نمایه شده است.
- درک ادبیات اختصاصی سازمان سنجش: موتور نکتانو می‌داند که کدام مفاهیم دانشگاهی در کنکور ممنوعه هستند و کدام گزاره‌ها صرفاً در چارچوب کتاب تست میشوند.
- الگوریتم حل مستقل تست‌های شمارشی: در مواجهه با تست‌های شمارشی، نکتانو کل سوال را یکباره پردازش نمی‌کند؛ بلکه هر گزاره را به عنوان یک قضیه منطقی جداگانه استخراج کرده، با متن کتاب مطابقت می‌دهد و برچسب صحت را برای تک‌تک آن‌ها صادر میکند.
- محاسبات جبری استوکیومتری کالیبرهشده: عملیات محاسباتی شیمی در نکتانو از مسیر موتورهای جبر نمادین کنترل میشوند تا از خطای سرهم‌بندی اعداد در مدل‌های زبانی جلوگیری شود.
یک مثال و کالبدشکافی واقعی (Case Study)
برای لمس عینی این تفاوت، به نمونه زیر که برگرفته از یکی از تله‌های متداول کنکور در مبحث دستگاه گوارش است توجه کنید:
تست نمونه: بررسی ساختار بافتی لوله گوارش انسان
صورت تست: «در ارتباط با ساختار بافتی لوله گوارش انسان، کدام عبارت به درستی بیان شده است؟»
- ۱) در تمام طول لوله گوارش، لایه مخاطی ضخیم‌ترین لایه دیواره به شمار می‌آید.
- ۲) در معده، لایه ماهیچه‌ای دارای سه لایه ماهیچه صاف است که در همه آن‌ها امتداد یاخته‌ها حلقوی است.
- ۳) در دیواره مری، شبکه یاخته‌های عصبی منحصراً در لایه زیرمخاط مستقر است.
- ۴) صفاق بیرونی‌ترین لایه بافتی است که تمام بخش‌های لوله گوارش را به طور کامل احاطه میکند.
پاسخ ChatGPT و مدل‌های عمومی:
چت‌بات عمومی به دلیل عدم تطبیق با قیدهای کتاب درسی، گزینه ۴ را به دلیل نقش حفاظتی عمومی صفاق تأیید میکند، یا در گزینه ۲ متوجه تله «امتداد یاخته‌ها» (مورب، حلقوی، طولی) نمی‌شود و با توضیحی مفصل گزینه غلط را به عنوان جواب معرفی میکند!
تحلیل موشکافانه نکتانو:
نکتانو گزینه‌ها را به صورت سیستماتیک کالبدشکافی میکند:
- رد گزینه ۱: با استناد به شکل دیواره گوارش (زیست دهم، صفحه ۱۸)، ضخامت لایه‌ها در بخش‌های مختلف یکسان نیست و در بخش‌های عمده، لایه ماهیچه‌ای ضخامت بیشتری دارد (تله قید «در تمام طول»).
- رد گزینه ۲: لایه ماهیچه‌ای معده دارای سه زیرلایه طولی، حلقوی و مورب است؛ قید «در همه آن‌ها امتداد یاخته‌ها حلقوی است» تله طراح است و قطعاً نادرست است.
- تایید قطعی گزینه ۳: شبکه یاخته‌های عصبی زیرمخاطی (مایسنر) طبق متن صریح کتاب فقط در لایه زیرمخاط قرار دارد و در لایه مخاطی دیده نمی‌شود.
- رد گزینه ۴: صفاق تمام بخش‌ها را نمی‌پوشاند؛ بخش‌هایی از مری و انتهای راست‌روده فاقد صفاق بیرونی هستند (تله قید «تمام بخش‌ها»).
- نتیجه نهایی: تنها گزینه ۳ صحیح است.
کیفیت واقعی زمان می‌برد؛ در سال کنکور قمار نکنید
سال کنکور، سال آزمون و خطا با ابزارهای غیرمتخصص نیست. هر تست، سهمی از رتبه، دانشگاه و آینده شغلی شما را تعیین میکند. تکیه بر ابزارهایی که برای گفتگوهای عمومی ساخته شده‌اند، در دروسی با ضریب حیاتی مانند زیست‌شناسی (ضریب ۱۲) و شیمی (ضریب ۹)، قماری پرهزینه است.
نکتانو به عنوان نخستین دستیار شناختی عمیق منطبق بر کتاب‌های درسی ایران توسعه یافته است تا اطمینان و دقت علمی را به میز مطالعه شما بازگرداند.
عضویت در لیست انتظار دسترسی زودهنگام نکتانو
اگر خواهان دستیابی به تحلیل‌های بی‌نقص، تله‌یابی خودکار قیدها و آموزش گامبهگام استوکیومتری پیش از برگزاری کنکور هستید، هم‌اکنون با ثبت شماره خود در لیست انتظار نکتانو، جزو نخستین داوطلبانی باشید که از این پلتفرم تخصصی استفاده می‌کنند.
پیوستن به لیست انتظار نکتانو ←پرسش‌های متداول
چرا ChatGPT با وجود هوش بالا، تست‌های زیست کنکور را غلط حل میکند؟ +
زیرا مرجع یادگیری ChatGPT مقالات عمومی اینترنت و کتب دانشگاهی زبان اصلی است، در حالی که ملاک طراح کنکور فقط و فقط متن، قیدها و شکلهای کتب درسی مصوب ایران است. مدل‌های عمومی توانایی تشخیص قیدهای حساس زیست را ندارند و دچار توهم با اعتمادبه‌نفس میشوند.
آیا برای یادگیری و حل مسائل شیمی میتوان به هوش مصنوعی اعتماد کرد؟ +
چتباتهای عمومی در مسائل چندمرحلهای استوکیومتری دچار خطای محاسباتی میشوند زیرا اعداد را حدس میزنند. اما نکتانو با موتور جبر نمادین کالیبرهشده، مسائل شیمی را دقیقاً طبق موازنه کتاب درسی و به صورت گامبهگام حل میکند.
نکتانو چطور شکلهای کتاب زیست را که در متن توضیح داده نشدهاند متوجه میشود؟ +
نکتانو مجهز به پایگاه دانش اختصاصی است که تمام زیرنویسها، جهتگیری فلشها، مقاطع سلولی و جزئیات تصویری کتب درسی دهم تا دوازدهم را به عنوان کلیدهای تحلیلی نمایه کرده و در استنتاج تستها فراخوانی میکند.
