مقایسه ChatGPT و Gemini با 7 پرامپت؛ برنده کدام است؟ - خیمه نیوز

در آزمایش های ارزیابی انسانی، مدل های پیشرو از گوگل و OpenAI مرتباً در رقابت های گفت وگویی جایگاه خود را تغییر می دهند. مقایسه های ما نیز نشان داده که گاهی هوش مصنوعی جمینای برنده می گردد و گاهی چت جی پی تی. با توجه به اینکه هر دو این هوش های مصنوعی اخیرا بهٰ زورسانی هایی داشته اند، حالا برای معین کردن برنده این رقابت، با 7 پرامپت به مقایسه ChatGPT و Gemini می پردازیم.

ساخت پیغام های دستوری یا پرامپت ها

برای این آزمایش و مقایسه ChatGPT و Gemini، از نسخه های ChatGPT Plus و Gemini Advanced استفاده شده تا بتوان از برترین مدل های موجود در این دو برنامه هوش مصنوعی بهره برد. هزینه اشتراک هر دو تقریباً مشابه است، حدود 20 دلار در ماه، که این هم نکته خوبی برای مقایسه است. با این حال شما می توانید این مقایسه را با مدل های هوش مصنوعی رایگان هم انجام دهید.

در این آزمایش، توانایی فراوری و تحلیل تصویر، نوشتن کد برای یک بازی و مهارت های نوشتن خلاقانه در این دو هوش مصنوعی مشهور آنالیز و مقایسه می شوند. بعلاوه در این آزمایش پرامپت هایی طراحی شده اند که به یاری آن ها بتوانیم مدل های پژوهشی هر دو پلتفرم را به چالش بکشیم؛ مدل o1 از ChatGPT و مدل 1.5 Deep Research از Gemini.

1. فراوری تصویر

ابتدا از ChatGPT و Gemini خواستم تصویری از یک گربه سایبورگ را خلق نمایند که در اتاق نشیمنی در زمان آینده قرار گرفته است. هیچ کدام از این دو هوش مصنوعی در حال حاضر تصاویر را خودشان مستقیماً فراوری نمی نمایند: Gemini پرامپت را به Imagen 3 می فرستند و ChatGPT آن را برای DALL-E 3 ارسال می نماید. نسخه های آینده این دو هوس مصنوعی احتمالاً قادر به خلق مستقیم تصاویر خواهند بود، اما در حال حاضر، تنها می توانیم توانایی آن ها در تفسیر پرامپت را آزمایش و مقایسه کنیم.

پرامپت:

یک تصویر بسیار دقیق از یک گربه سایبورگ در یک اتاق نشیمن در زمانی در آینده خلق کن. گربه باید در حال بازی با یک کنسول شناور باشد و خودش هم روی یک صندلی معلق نشسته باشد. اتاق باید دارای نمایشگرهای هولوگرافیک و نورپردازی های نئونی باشد و ترکیبی از عناصر فلزی و ارگانیک درون خود داشته باشد. زمان باید عصر باشد و چراغ های شهر از یک پنجره بزرگ دیده شوند.

برنده: ChatGPT برای اینکه گربه واقعاً یک سایبورگ بود.

2. تحلیل تصویر

در پرامپت دوم برای مقایسه ChatGPT و Gemini، توانایی تحلیل تصویر در جمینای و چت جی پی تی را آزمایش کردیم. هر دو در این زمینه عملکرد فوق العاده ای دارند، بنابراین علاوه بر تصویر، دستورالعمل های معینی هم به آن ها دادیم و از عکسی از یک ستاپ گیمینگ، رؤیایی استفاده کردیم.

پرامپت:

در این عکس از ستاپ گیمینگ، موارد زیر را تحلیل کن: موقعیت و ارتفاع مانیتور برای ارگونومیک بودن، مسائل و راه چاره ها برای مدیریت سیم و کابل ها، تنظیم نورپردازی و عوامل ایجاد خستگی چشم، استفاده از فضا و سازماندهی، کارا بودن چیدمان تجهیزات و در نهایت توصیه های معینی برای بهبود ارائه کن و هزینه های تقریبی را برآورد کن.

برنده: ChatGPT برای خلاصه کردن تحلیل در قالب یک جدول

3. کدنویسی برای مقایسه ChatGPT و Gemini

برای پرامپت سوم، توانایی کدنویسی تک مرحله ای هر دو هوش مصنوعی را با یک پرامپت توصیفی آزمایش کردیم. در مقایسه ChatGPT و Gemini در این مرحله از مدل o1 در ChatGPT و مدل Experimental Advanced 2.0 در Gemini استفاده شد. این پرامپت یکی از پیچیده ترین پرامپت های این آزمایش بود، چرا که هدفمان این بود که خروجی به صورت تک مرحله ای و به یکباره فراوری گردد. در نهایت هدف این است که کد داده شده باید بدون مشکل اجرا گردد. درضمن کدی که هر کدام از هوش مصنوعی ها داده بودند را در GitHub قرار داده ایم.

پرامپت:

یک بازی آرکید سریع (fast-paced) به نام Color Dash با استفاده از PyGame ایجاد کن که واکنش های سریع و تطابق رنگ ها در آن کلیدی باشند. موارد زیر در بازی مورد احتیاج است؛ گیم پلی اصلی: اشکال رنگی (دایره، مربع، مثلث) از بالای صفحه سقوط می نمایند؛ سه منطقه جمع آوری در پایین صفحه با رنگ های مختلف وجود دارد؛ بازیکن با استفاده از کلیدهای چپ/راست منطقه ها را حرکت می دهد؛ تطابق اشکال سقوط نماینده با منطقه هم رنگ؛ از دست دادن تطابق یا تطابق اشتباه برابر است با از دست دادن یک جان؛ با افزایش امتیاز، سرعت بیشتر می گردد.

بعلاوه بازی باید شامل موارد زیر باشد: رابط کاربری تمیز و مینیمالیستی که در آن مواردی مانند امتیاز فعلی، بالاترین امتیاز، جان های به جای مانده (آغاز با 3)، انیمیشن های ساده برای تطابق ها و خطاها، صفحه عنوان ساده، صفحه سرانجام بازی با امتیاز نهایی، کنترل های روان.

بعلاوه بازی باید دارای افکت های صوتی پایه باشد؛ افکت هایی برای تطابق پیروز، تطابق اشتباه، سرانجام بازی، ذخیره امتیاز در فایل محلی، آغاز مجدد با فشار دادن کلید Space پس از سرانجام بازی.

بازی باید فقط از اشکال پایه PyGame استفاده کند (بدون اسپرایت یا گرافیک پیچیده) اما به وسیله استفاده مناسب از رنگ و انیمیشن های روان، ظاهری شکیل داشته باشد. کد باید شرحات کامنت گذاری شده داشته باشد که نحوه عملکرد را شرح دهد.

برنده: Gemini به علت ارائه بازی با عملکرد بهتر

4. نوشتن خلاقانه در مقایسه ChatGPT و Gemini

یکی از قابلیت های شناخته شده هوش مصنوعی، نویسندگی خلاق است. این قابلیت یکی از اولین موارد استفاده ChatGPT پس از عرضه آن بود. در اینجا در مقایسه ChatGPT و Gemini از مدل o1 در ChatGPT و مدل Experimental Advanced 2.0 در Gemini استفاده کردیم تا داستانی درباره یک گوشی هوشمند بنویسند.

این بار داستان درباره گوشی هوشمندی است که پس از یک به روزرسانی نرم افزاری، خودآگاهی پیدا می نماید. داستان های هر دو هوش مصنوعی را در یک Google Doc قرار دادیم. هر دو از نظر کیفیت و توانایی داستان گویی بسیار مشابه بودند.

پرامپت:

یک داستان 500 کلمه ای درباره گوشی هوشمندی که به وسیله یک به روزرسانی نرم افزاری، خودآگاهی پیدا می نماید، بنویس. داستانت باید شامل موارد زیر باشد: افزایش آگاهی گوشی از عادت های کاربر در آن مشهود باشد، یک دوراهی اخلاقی مربوط به اطلاعات خصوصی کاربر در داستان وجود داشته باشد، عناصری از طنز و کنایه داشته باشد، ارجاعاتی به روندهای فعلی تکنولوژی داشته باشد، یک سرانجام غافلگیر نماینده داشته باشد و لحن داستان باید لحنی صمیمی اما تفکر برانگیز باشد.

برنده: ChatGPT به علت طول مناسب تر داستان

5. توانایی حل مساله در مقایسه ChatGPT و Gemini

در این قسمت از آزمایش و در مقایسه ChatGPT و Gemini از مدل o1 در مقابل Gemini 2.0 Experimental Advanced استفاده کردیم تا توانایی استدلال بهبود یافته این دو هوش مصنوعی را آنالیز کنیم. در این پرامپت هر دو هوش مصنوعی یک موقعیت و یک مشکل را دریافت کردند و باید راه چارهی برای آن ارائه می دادند.

پاسخ های کامل هر دو را در یک Google Doc ذخیره کردیم. هر دو این هوش های مصنوعی پاسخ را گام به گام شرح دادند و جزئیات را بیان کردند. معمولاً چنین پرامپت هایی را به صورت تدریجی و گام به گام هم اجرا می نمایند، با این حال هر دو هوش مصنوعی عملکرد خوبی داشتند.

پرامپت:

تنظیمات و موقعیت من: تلویزیون LG C3 4K OLED، کنسول PS5، کابل HDMI 2.1 با سرعت بالا و مشکل من: صفحه سیاهی به مدت 2-3 ثانیه هر 45-60 دقیقه هنگام بازی ظاهر می گردد. جزئیات اضافی شامل: این مشکل هنگام استفاده از اپلیکیشن های استریم وجود ندارد؛ پس از به روزرسانی اخیر سیستم PS5 مشکل آغاز شده است؛ کابل HDMI به درستی متصل است؛ فریمور تلویزیون به روز است. حالا هدایت گام به گام برای عیب یابی این مشکل ارائه دهید، هدایت که شامل راه چاره های سخت افزاری و نرم افزاری احتمالی باشد.

برنده: Gemini به علت ساختار بهتر پاسخ

6. مقایسه ChatGPT و Gemini در طراحی اتاق

برای این آزمون، مدل o1 از ChatGPT را در برابر مدل Deep Research 1.5 از Gemini قرار دادم. اگرچه این مدل جدیدترین نسخه گوگل نیست، اما Deep Research به علت روش تفکر مشابه با ChatGPT o1 در حل مسائل فوق العاده است. این مدل برای پیدا کردن تحقیقات معتبر با ارجاع به منابع دقیق بسیار مفید است. اما همان طور که در تصویر مشاهده می کنید، ChatGPT o1 پرامپت را دقیق تر دنبال کرد.

پرامپت:

به من یاری کن اتاق مهمان 4x3 متری خود را به یک فضای چند منظوره تبدیل کنم که به صورت زیر عمل کند: در روزهای هفته به عنوان دفتر کار خانگی (من به صورت دورکاری به عنوان طراح گرافیک کار می کنم)؛ این اتاق را به عنوان اتاق مهمانی طراحی کن که برای والدین سالمندم که ماهانه به تماشا ما می آیند مکانی راحت باشد؛ بعلاوه طراحی ات به گونه ای باشد که بتوان از اتاق به عنوان فضای کاردستی برای پروژه های آخر هفته بچه ها نیز استفاده کنم.

احتیاجها: بودجه: 2,000 دلار، باید شامل فضایی برای قرار دادن لوازم کاردستی باشد؛ نورپردازی مناسب برای تماس های ویدئویی داشته باشد؛ دسترسی آسان به تخت برای والدین سالمند با مسائل حرکتی داشته باشد؛ فضای کافی برای یک مانیتور 27 اینچ و تبلت طراحی در آن باشد؛ فضایی برای پخش کردن وسایل پروژه های بچه ها در کف اتاق وجود داشته باشد؛ جریان هوای خوب و نور طبیعی از تک پنجره اتاق فراهم باشد.

بعلاوه دیگر موارد مورد احتیاج عبارت اند از: پیشنهادات دقیق برای نقشه کف، پیشنهادات خاص برای مبلمان همراه با قیمت، راه چاره هایی برای استفاده از فضا برای قراردادن وسایل، طراحی رنگ و پلان نورپردازی، جدول زمانی برای بازسازی، نکاتی برای حفظ سازماندهی بین کاربری های مختلف

برنده: ChatGPT به علت دنبال کردن بهتر پرامپت. Gemini از بودجه فراتر رفت و بیش از حد بر گزینه های گران قیمت تمرکز کرد.

7. آموزش هوش مصنوعی

در نهایت، برترین استفاده از چت بات هایی مانند ChatGPT و Gemini، برای آموزش است. در این بخش از آزمایش و مقایسه ChatGPT و Gemini از آن ها خواستیم فرآیند فراوری تصاویر به وسیله هوش مصنوعی را برای افراد عادی شرح دهند و ایده هایی برای آینده این فناوری ارائه نمایند. شرحات کامل را در یک Google Doc برای شما هم به اشتراک گذاشتیم، اما از نظر ما برنده به راحتی Gemini بود. نه به این علت که ChatGPT بد بود، بلکه به این علت که Gemini جزئیات بیشتری ارائه داد، از جمله شرح درباره وجود سوگیری ها در داده های تصویری.

پرامپت:

فرآیند فراوری تصویر به وسیله هوش مصنوعی را به زبان ساده شرح بده، شامل: نحوه یادگیری هوش مصنوعی از تصاویر موجود، نقش پرامپت های متنی در ایجاد تصویر، علت اینکه چرا بعضی عناصر ممکن است تغییر شکل یافته به نظر برسند، ملاحظات قانونی و اخلاقی، محدودیت ها و چالش های فعلی، بهبودهای مورد انتظار در 1-2 سال آینده، نکاتی برای بهبود نتایج و در نهایت مثال های خاص از فراورینماینده های محبوب تصاویر هوش مصنوعی ارائه کن.

برنده: Gemini به علت ارائه جزئیات درباره سوگیری در داده های تصویری

نتیجه نهایی: ChatGPT برنده شد

برنده نهایی این چالش ChatGPT بود، اما فقط با یک امتیاز اختلاف. Gemini از آخرین باری که ما آن را با ChatGPT مقایسه کردیم، پیشرفت چشمگیری داشته است. ما متوجه شدیم Gemini در کدنویسی بسیار بهتر از آن چیزی است که تصور می کردیم و بعلاوه در حل مسائل عملکرد خوبی دارد. ویژگی های دیگری نیز وجود دارد که آزمایش نکردیم، مثلا مقایسه بین پروژه ها و Gems (بسته هایی از کد هستند که می توان آن ها را به پروژه اضافه نمود) یا حل مسئله کدنویسی پیچیده تر با چندین پیغام. با این حال امیدواریم این مقایسه به شما دیدگاه خوبی از پیشرفت های ChatGPT و Gemini و نحوه مقایسه آن ها بدهد.

منبع: tomsguide.com