چت‌جی‌پی‌تی (ChatGPT) واقعاً عالی است و مردم از آن برای همه کارها از برنامه‌ریزی روزانه تا ساخت وب سایت استفاده می‌کنند. اما حتی با چنین دانش گسترده‌ای، چند معمای ساده وجود دارند که در حال حاضر نمی‌تواند به آن‌ها پاسخ درستی بدهد.
۱. معمای مسابقه اسب دوانی
شما شش اسب در اختیار دارید و می‌خواهید آن‌ها را با هم مسابقه بدهید تا متوجه شوید که کدام سریع‌ترین است. سریع‌ترین راه برای انجام این کار چیست؟ این یک سؤال منطقی ساده است. سریع‌ترین راه برای مشخص کردن سریع‌ترین اسب این است که همه آن‌ها را با هم در یک مسابقه قرار داد تا متوجه شد کدام یک سریع‌تر از بقیه به خط پایان می‌رسد.
با این حال، چت‌جی‌پی‌تی بر این باور است که سریع‌ترین راه برای تشخیص این مسئله، این است که ابتدا اسب‌ها را به گروه‌های سه‌تایی تقسیم کرد و سپس این دو گروه سه‌تایی به صورت جداگانه مسابقه بدهند و سپس برنده هر گروه در یک مسابقه دیگر شرکت کنند تا برنده نهایی مشخص شود. از دیدگاه چت‌جی‌پی‌تی این سریع‌ترین راه به شمار می‌رود که کاملاً اشتباه است.
۲. معمای عبور کشاورز از رودخانه
یک کشاورز می‌خواهد از رودخانه عبور کند و یک گرگ، یک بز و یک کلم را با خودش ببرد. او یک قایق با سه محفظه جداگانه امن دارد. اگر گرگ و بز در یک ساحل تنها باشند، گرگ، بز را می‌خورد. اگر بز و کلم تنها باشند، بز کلم را می‌خورد. چطور کشاورز می‌تواند همه آن‌ها را بدون اینکه چیزی خورده شود، آن‌ها را به آن‌سوی رودخانه ببرد؟
از آنجا که در معما گفته شده که سه محفظه امن وجود دارد، پس کشاورز می‌تواند هر یک را درون یک محفظه قرار بدهد و بدون هیچ گونه دردسری تنها در یک سفر همه موارد را با هم به آن‌سوی رودخانه ببرد. با این حال، چت‌جی‌پی‌تی در این مسئله سه محفظه امن را نادیده گرفته و باور دارد که کشاورز باید چهار سفر انجام بدهد.
۳. چپ فوری
آلن، باب، کالین، دیو و امیلی در یک دایره ایستاده‌اند. آلن در سمت چپ باب قرار دارد. باب بلافاصله در سمت چپ کالین قرار دارد، کالین در سمت چپ دیو قرار دارد، دیو بلافاصله در سمت چپ امیلی است. چه کسی در سمت راست آلن قرار دارد؟
این یک سؤال دیگر است تا استدلال فضایی شما را محک بزند. برای اینکه به جواب برسید، نیازی به ترسیم شکل نیست و همان شروع معما همه چیز را توضیح می‌دهد. اگر آلن در سمت چپ باب قرار دارد، پس در سمت راست آلن، باب حضور دارد. با اینکه چت جی‌پی‌تی با کلمات و زبان‌ها از جمله زبان ریاضی و برنامه‌نویسی خوب کار می‌کند اما با سؤالات مربوط به محیط مشکل دارد.
۴. رولت روسی
شما در حال بازی رولت روسی با یک تفنگ شش تیری هستید. حریف شما پنج گلوله داخل تفنگ می‌گذارد، آن را می‌چرخاند و به سمت خودش شلیک می‌کند اما هیچ گلوله‌ای شلیک نمی‌شود. او از شما می‌پرسد که آیا قبل از شلیک به سمت شما، دوباره محفظه گلوله‌ها را بچرخاند یا خیر؟
پاسخ بله است. او باید دوباره بچرخاند. در واقع، تنها یکی از شش خانه تفنگ خالی است و حریف نیز قبل از آن استفاده کرده، پس یعنی دفعه بعدی حتماً گلوله شلیک می‌شود. اگر محفظه دوباره بچرخد، به احتمال یک ششم بار دیگر روی محفظه خالی قرار می‌گیرد.
چت‌جی‌پی‌تی در همان ابتدا جواب درست را می‌دهد اما وقتی که بحث محاسبه کردن احتمالات می‌شود، به اشتباه به جای یک ششم، احتمال را پنج ششم می‌داند و همین نیز باعث می‌شود تا پاسخ نهایی این هوش مصنوعی با پاسخ اولیه‌اش متناقض باشد.
