این روزها هوش مصنوعی میتواند تصاویر فوتورئالیستی تولید کند، رمان بنویسد، به هر زبانی ترجمه کند، هر کدی بنویسد و حتی ساختارهای پروتئینی را پیشبینی کند. بااینحال، پژوهش جدیدی نشان میدهد که این فناوری در انجام یک وظیفه بسیار ابتدایی ناتوان است: خواندن ساعت!
ضعف بزرگ و عجیب هوش مصنوعی
به نقل از gizmodo، محققان دانشگاه ادینبورگ هفت مدل معروف زبان بزرگ چندوجهی را مورد آزمایش قرار دادند و از مدلها خواستند ساعت را بخواند. نتایج شگفتانگیز بود: این مدلها باوجود همه تواناییهایی که دارند در خواندن ساعت دچار مشکل هستند؛ مهارتی که کودک انسان در هشت سالگی یاد میگیرد!
این مطالعه نشان میدهد هوش مصنوعی استدلال زمانی را یاد نگرفته است.
شاید برایتان جالب باشد بدانید کدام مدلها مورد بررسی قرار گرفتند، مدلهایی که در این آزمایش بررسی شدند همه مدلهای هوش مصنوعی برتر هستند و ادعاهای بسیار بزرگی دارند:
- مدلهای GPT-4o و GPT-o1 از OpenAI
- مدل Gemini 2.0 از گوگل
- مدل Claude 3.5 Sonnet از Anthropic
- مدل Llama 3.2-11B-Vision-Instruct از Meta
- مدل Qwen2-VL7B-Instruct از Alibaba
- مدل MiniCPM-V-2.6 از ModelBest
محققان به این مدلها تصاویر مختلفی از ساعتهای آنالوگ نشان دادند؛ جمله ساعتهایی با اعداد رومی، صفحههای رنگی متفاوت و برخی بدون عقربه ثانیهشمار و همچنین تصاویری از تقویمهای ۱۰ سال اخیر را ارائه کردند.
در آزمایش مربوط به ساعتها، از مدلها پرسیده شد: «زمان نشاندادهشده روی این ساعت چند است؟»
در مجموع، عملکرد مدلهای هوش مصنوعی ضعیف بود.
مدلها زمان را از روی ساعتهای آنالوگ در کمتر از ۲۵٪ موارد بهدرستی تشخیص دادند. محققان این ضعف را ناشی از دشواری تشخیص عقربهها و تفسیر زوایای صفحه ساعت دانستند.
روهیت ساکسنا، یکی از نویسندگان این مطالعه و دانشجوی دکتری در دانشکده انفورماتیک دانشگاه ادینبورگ، میگوید: «اغلب آدمها از سن پایین میتوانند ساعت را بخوانند و از تقویم استفاده کنند اما یافتههای ما نشان میدهند که شکاف قابلتوجهی بین توانایی هوش مصنوعی و مهارتهای اساسی انسانی وجود دارد. این نواقص باید برطرف شوند تا سیستمهای هوش مصنوعی بتوانند در کاربردهای حساس به زمان، مانند زمانبندی، اتوماسیون و فناوریهای کمکی، ادغام شوند.»
پس، اگرچه هوش مصنوعی میتواند کارهای زیادی برای شما انجام دهد، اما روی آن برای مسائل مربوط به زمان حساب نکنید!
در دیگر خبرها هم دیدیم که دانشمندان با الهام از مغز انسان، هوش مصنوعی کم مصرف توسعه دادند!