Testing GPT Astra vs Fable 5.1
تحب تدعم البث؟ عضوية «داعم» على يوتيوب بـ 60 جنيه في الشهر: شارات، إيموجي، وأسئلتك بجاوبها الأول في البث. اشترك كداعم
الخلاصة
يركّز البث على مقارنة عملية وعمياء جزئيًا بين GPT Astra وFable 5.1 عبر مطالبات متطابقة شملت ألعابًا، ورسم SVG، وصفحات هبوط وتجارب وكيلة. جاءت النتائج متباينة: بدا Astra أقوى بصريًا وفي التحكم ببعض الألعاب، بينما قدّم Fable أحيانًا أسلوب لعب أكثر تحديًا وأفكارًا تصميمية أكثر ابتكارًا؛ كما اختلفت السرعة باختلاف المهمة وانقسمت آراء الجمهور، لذلك لم يظهر فائز عام حاسم. يناقش لقمان حدود الاختبارات الفردية والمعايير القياسية والتحكيم بالنماذج، ويرى أن التقييم الأفضل يجمع خبرة المجال، وتقليل التحيز، واختبارات التفكير النقدي وتوليد الأفكار، مع مراعاة الكفاءة والسعر وحدود الاستخدام وتكامل الأدوات. ويتوسع النقاش إلى اختيار نماذج مختلفة للتخطيط والتنفيذ، وتنظيم الوكلاء الفرعيين، وضغط سياق جلسات البرمجة وتوثيقها، والبوتات الجاهزة، وأتمتة الفيديو، والنسخ الاحتياطي، وتحوّل أدوار المطورين. أما الآراء حول AGI واستبدال الوظائف ومستقبل التطوير الكامل بالذكاء الاصطناعي فطُرحت كتوقعات ومخاوف غير محسومة، لا كحقائق مثبتة.
104 لحظة من البث
- 0:01:37
تصميم مقارنة عمياء بين نموذجين
يشرح لقمان رغبته في اختبار النموذجين بنفسه عبر مهام تشمل التفكير النقدي والتصميم وتصحيح الأخطاء، ويقترح عرض النتائج من دون كشف النموذج الذي أنشأ كل نتيجة حتى يصوّت الجمهور بقدر أقل من التحيز.
- 0:05:48
اختلاف نقاط قوة النماذج
أثناء بدء الاختبار، ينقل النقاش رأيًا من الجمهور بأن النموذجين قويان لكن كل واحد قد يتفوق في جوانب مختلفة، ومنها التصميم. يظل ذلك رأيًا منقولًا في هذه المرحلة وليس نتيجة أثبتها الاختبار.
- 0:07:04
اختبار ادعاء التفوق في التصميم
يقول لقمان إنه سمع أن أسترا أفضل في التصميم، لكنه يؤكد أنه سيختبر ذلك بنفسه. يبدأ بمهمة إنشاء نسخة من لعبة في ملف واحد، ويريد مقارنة الزمن والنتائج بدل الاعتماد وحده على المعايير أو آراء الناس.
- 0:08:11
اختيار أداة البرمجة حسب الكفاءة
يطرح لقمان رأيه بأن استخدام محرر برمجة مع نموذج مساعد قد ينجز عملًا أكثر من الاعتماد على أدوات أخرى، مع إقراره بأن كودكس جيد. هذا تقييم شخصي مسجل، وليس قياسًا مثبتًا داخل هذا المقطع.
- 0:09:10
تقليل التحيز عند تقييم النتائج
يوضح لقمان أنه أرسل الطلب نفسه إلى النموذجين وسيخفي مصدر كل نتيجة، ثم يفتح اللعبتين مع الجمهور ويطلب تقييمهم واقتراح اختبارات إضافية. الهدف هو الوصول إلى حكم عملي أقل تأثرًا باسم النموذج.
- 0:10:02
معايير اختيار مساعد الذكاء الاصطناعي للبرمجة
ناقش لقمان تفضيله المبدئي بين Claude وأدوات GPT/Codex بوصفه رأيًا شخصيًا يعتمد على اتساع القدرات في التصميم والبرمجة، الكفاءة، حدود الاستخدام، التكلفة، والألفة المتراكمة مع الأداة. لم تُعرض مقارنة منهجية تثبت هذه الانطباعات.
- 0:11:29
تعلّم البرمجة بأسلوب «فايب كودينج» دون خلفية تقليدية
يصف لقمان نفسه كهاوٍ يمارس «فايب كودينج» منذ مدة رغم عدم امتلاكه خلفية برمجية تقليدية، ويقول إنه يستفيد من أصحاب الخبرة البرمجية.
- 0:11:48
مقارنة عمياء بين GPT Astra وFable 5.1 عبر لعبة Flappy Bird
استخدم لقمان الطلب القصير نفسه لإنشاء نسخة HTML من Flappy Bird عبر المنتجين المسمّيين GPT Astra وFable 5.1، وخطّط لعرض اللعبتين والتصويت قبل كشف التسميات لتقليل التحيز. لاحظ مبدئيًا أن Astra بدا أسرع، لكنه لم يقدّم هنا نتيجة نهائية. كما صرّح بأنه لا يعرف هل GPT أو Codex أو Claude هو النموذج الأساسي الذي أنشأ واحدة على الأقل من الألعاب المعروضة، لذلك لا يمكن اعتبار تسمية المنتج إسنادًا مؤكّدًا للنموذج. وناقش أيضًا صعوبة تقييم الإبداع والتفكير النقدي أو جودة استراتيجية تسويقية من مخرَج واحد؛ إذ قد تتطلب الأفضلية تحققًا طويل المدى.
- 0:14:00
لماذا يبدو المساعد مألوفًا وناقدًا بمرور الوقت؟
يتبادل لقمان وأحد المشاركين انطباعهما بأن Claude أصبح يفهم السياق والتفضيلات مع طول الاستخدام، وأنه قد يعارض المستخدم بدل مجاملته. ويعزو لقمان هذا الإحساس إلى ذاكرة تجمع معلومات من المحادثات وتستخدمها عبر الجلسات؛ وهي ملاحظات وتجارب منسوبة إليهما وليست اختبارًا مقارنًا مثبتًا.
- 0:20:32
توقعات بتأثير GTA 6 واتساع جمهورها
رأي عابر بأن طول فترة تطوير GTA 6 وحماس شريحة عمرية واسعة لتجربتها قد يمنحان إطلاقها تأثيرًا اقتصاديًا كبيرًا؛ طُرح ذلك كتوقع لا كحقيقة مثبتة.
- 0:22:31
تنظيم الوكلاء كهيكل شركة والتحقق من أدوارهم
شرح لتصميم نظام متعدد الوكلاء على هيئة مخطط تنظيمي: مسؤولون تنفيذيون بشخصيات ومهام وأقسام محددة، ثم إجراء مقابلات مع الوكلاء للتأكد من فهم كل وكيل لهدفه وتخصصه وصلاته ببقية النظام. يوضح النقاش أن الترابط بين الوكلاء قد يرفع التعقيد ليشبه إدارة شركة حقيقية.
- 0:24:09
السرعة وفلسفات الأدوات كمعايير للمقارنة
أثناء انتظار اكتمال الاختبار، اعتُبرت سرعة الإنجاز معيارًا مهمًا، مع ملاحظة أن أدوات الذكاء الاصطناعي قد تختلف أيضًا في «فلسفة» العمل وطريقة التعامل مع سير العمل والملفات والذاكرة. كانت بعض أسماء الأدوات في هذا الجزء غير مستقرة في التفريغ، لذلك لم تُنسب النتائج التفصيلية إلا حيث كانت واضحة.
- 0:26:22
مقارنة عمياء بين GPT Astra وFable 5.1 بلعبة شبيهة بـFlappy Bird
أُرسل طلب متقارب إلى GPT Astra وFable 5.1 لإنشاء لعبة شبيهة بـFlappy Bird، ثم عُرض الناتجان دون كشف هويتهما لتقليل تحيز الجمهور. جُرّبت اللعبتان من حيث أسلوب اللعب والمؤثرات الصوتية وسهولة التحكم؛ فضّل المتحدث النسخة اليسرى إجمالًا أثناء التجربة، بينما رأى أحد المشاركين أن اليمنى أنظف، ثم رجّح المتحدث أن اليسرى من Fable واليمنى من Astra. تظل هذه مقارنة انطباعية محدودة وليست حكمًا شاملًا على النموذجين.
- 0:30:15
مقارنة جودة التصميم وتحدّي اللعب
في مقارنة للعبة مولّدة بالموجّه نفسه، بدا أحد الإصدارين أنظف بصرياً وأسهل، بينما قدّم الآخر تحدياً أكبر وفيزياء بدت أفضل للمتحدث. الخلاصة كانت أن الحكم نسبي، ولا يوجد فائز مطلق لأن سهولة اللعب، والتحدي، والتصميم البصري قد تقود إلى تفضيلات مختلفة.
- 0:34:24
كيف نختبر توليد الأفكار والتفكير النقدي؟
يناقش المتحدث صعوبة التمييز بين نماذج متقاربة في مهام التصميم، ويقترح أن الاختبار الأهم هو قدرتها على توليد أفكار غير متوقعة والتفكير خارج الأنماط المألوفة. كما يوضح أن قياس هذه القدرات أصعب من مقارنة مخرجات مباشرة أو أفكار مسترجعة من التدريب.
- 0:36:24
اختبار النماذج عبر مناظرة متبادلة
بعد ملاحظة أن فرق السرعة لم يظهر بوضوح في التجربة، اقترح النقاش أن يكتب كل نموذج اختباراً للقدرات المطلوبة ثم تُنفّذ الاختبارات في محادثات جديدة. وطُرحت أيضاً فكرة إسناد موقف مختلف لكل نموذج في قضية جدلية وإدخالهما في مناظرة، بوصفها طريقة محتملة لفحص الحجة والتفكير النقدي لا حكماً نهائياً عليهما.
- 0:37:43
لماذا لا تكفي المعايير القياسية وحدها؟
يشرح المتحدث أنه يريد اختباراً عملياً يساعد الجمهور على فهم الفروق بين Astra وFable 5.1، ويعبّر عن تحفظه تجاه الاعتماد على المعايير القياسية وحدها، مشيراً إلى أن القائمين عليها يناقشون هم أيضاً حدودها.
- 0:39:47
ضرورة مطابقة فئات النماذج في المقارنة
يطرح المتحدث سؤالاً منهجياً حول الفئة الأنسب عند مقارنة Fable بـAstra: هل ينبغي وضع الفئات القصوى في مواجهة بعضها أم استخدام فئة أخرى؟ المقطع يثير مسألة عدالة إعداد المقارنة لكنه ينتهي قبل حسم الاختيار.
- 0:42:08
هل تستطيع النماذج التفكير خارج الصندوق؟
يناقش المتحدث رأيًا مفاده أن النماذج الحالية تحتاج إلى سياق وعقد واضحين، ثم يعرض—بوصفه تصورًا غير محسوم ينسبه إلى آخرين—احتمال أن تصبح أنظمة AGI المستقبلية أقدر على التفكير المستقل. ويؤكد أن هذه المرحلة صعبة التصور وأن التوقعات المتداولة بشأن تفوق الذكاء الاصطناعي تثير قلقه.
- 0:44:01
اختبار أعمى لرسم جمل بصيغة SVG
طُلب من GPT Astra وFable 5.1 إنشاء رسم جمل باستخدام SVG مضمن فقط، مع إخفاء هوية المخرجات قدر الإمكان لتقليل التحيز. اختلفت تفضيلات الجمهور بين الرسمين، ورأى المتحدث أن النتيجة نسبية وغير حاسمة، كما لاحظ أن Fable أنهى هذه المهمة قبل Astra دون تقديم ذلك كقياس شامل للأداء.
عندك سؤال عن حاجة في البث ده؟
اسأل في الجروب