كشفت تجربة حديثة لمطوّر عن مقارنة عملية بين نماذج الذكاء الاصطناعي الكبرى مثل Claude وGemini وChatGPT في تطوير البرمجيات. توضح النتائج أي نموذج هو الأفضل لمهام مثل توليد الكود وتحليل السياق بناءً على استخدام يومي مكثف.
«اكتشف مطوّر خبير أي نماذج الذكاء الاصطناعي الأفضل لعملك اليومي، وهو أمر مهم جدًا لفهم كيف يمكن لهذه الأدوات أن تدعمك دون إضاعة الوقت أو المال.» «قام هذا المطور باختبار نماذج رائدة مثل Claude وGemini وChatGPT، واستخدم معها أداة Spec-kit لتعميق فهمها لمخزن الأكواد البرمجية. بعد استخدام مكثف يوميًا، لديه بعض الملاحظات الواضحة التي يشاركها معنا.» «بالنسبة لتوليد الكود، أظهر Claude تفوقًا كبيرًا. إنه الأفضل على الإطلاق في إنشاء الكود، ويمكنه فهم قواعد البيانات المعقدة التي تحتوي على خدمات مصغرة متعددة. الكود الذي ينتجه يلتزم بدقة بمبادئ وأساليب كتابة الكود الخاصة بنا، ويستخدم أحدث الحزم والأساليب البرمجية بدون أساليب قديمة. في تحليل السياق، Claude أيضًا الأفضل، حيث يفهم المتطلبات بعمق ويبحث في جميع المناطق المتأثرة بالمشروع بلا أخطاء. وحتى في التحليل التقني العام، يمكنك غالبًا الحصول على ما تحتاجه من أول محاولة، ومن المرجح أن تكون الحلول التي يقترحها هي الحلول التي ستختارها. ومع ذلك، هناك جانب سلبي كبير: استهلاك الرموز (Tokens) مرتفع جدًا. يكاد يكون من المستحيل تقييد استهلاكه، وكلما كان الكود أكبر، زادت سرعة استهلاكه للرموز، مما يعني تكلفة عالية. هذا المطور وحده كان يستهلك حوالي 200 دولار شهريًا من الرموز، وهذا لمطوّر واحد فقط!» «أما Gemini، فهو جيد في توليد الكود، لكنه قد يتعثر أحيانًا ويستغرق وقتًا طويلاً لإيجاد حل. الكود الذي ينتجه لا يضمن دائمًا اتباع مبادئ التسمية والاتفاقيات الخاصة بنا دون الحاجة إلى توجيه إضافي، وتحتاج إلى تكرار المحاولات للحصول على أفضل حل. في تحليل السياق، Gemini جيد جدًا ويكاد يكون على قدم المساواة مع Claude، حيث يحلل قاعدة الكود بأكملها ويحدد المناطق المتأثرة بدقة. وفي التحليل التقني العام، يقدم حلولًا ممتازة عندما تزوّده بتفاصيل واضحة ودقيقة حول النتائج المتوقعة. لكن إذا كانت التعليمات غامضة، فإنه يميل إلى إعطاء معلومات غير دقيقة.» «هذه النتائج تظهر أن اختيار الأداة المناسبة يعتمد على المهمة التي تقوم بها. إذا كانت أولويتك هي توليد كود دقيق وفعال وفهم سياق معقد، فقد يكون Claude خيارك الأول، مع الأخذ في الاعتبار التكلفة. أما إذا كنت تبحث عن تحليل سياق وتقني جيد وتستطيع توفير توجيهات واضحة، فـ Gemini يمكن أن يكون مساعدًا قويًا، خاصة إذا كانت تكلفة الرموز هي مصدر قلق.»