مساعدة الذكاء الاصطناعي في البرمجة لغير المبرمجين لبناء تطبيق صغير
المهمة: شخص لم يبرمج من قبل يبني تطبيقًا صغيرًا يعمل باتباع تعليمات أداة ذكاء اصطناعي واحدة.
العروض التوضيحية تجعل بناء التطبيقات يبدو فوريًا. نضع شخصًا حقيقيًا لا يبرمج أمام كل أداة بفكرة التطبيق الصغير نفسها، ونحسب ما يلزم للوصول إلى شيء يعمل.
هذه خطة اختبار. لم يُشغَّل شيء بعد، لذلك لا توجد درجات أو أحكام أدناه.
كيف اختبرنا
- مواصفات تطبيق مكتوبة وقائمة قبول (ما معنى "يعمل")، متطابقة لكل الأدوات.
- يستخدم مختبِر بلا خبرة برمجية أداة واحدة في كل مرة، ويبدأ من الصفر، ولا يفعل إلا ما تطلبه منه الأداة.
- نتوقف عند الوصول إلى تطبيق يعمل أو بعد 90 دقيقة.
- نسجّل لكل أداة: هل نجح، وعدد الرسائل للوصول، وعدد مرات التعثر، وكل بند ناجح في قائمة القبول، والتكلفة، والوقت الكلي.
- يقيّم شخص أيضًا وضوح الشرح.
ما الذي قيّمناه
- بنود القائمة الناجحة · تقييم بشري · الوزن 3
- من قائمة القبول (أدخل عدد البنود الناجحة).
- الرسائل حتى العمل · تقييم بشري · الوزن 1
- عدد الرسائل التي أرسلها المختبِر. كلما قلّ كان أفضل (الحد 50).
- مرات التعثر · تقييم بشري · الوزن 1
- عدد المرات التي لم يستطع فيها المختبِر اتباع تعليمة. كلما قلّ كان أفضل (الحد 10).
- شرح يفهمه المبتدئ · تقييم بشري · الوزن 1
- هل شُرحت الخطوات بكلمات بسيطة؟
المدخلات التي تلقتها كل أداة
مواصفات التطبيق وقائمة القبولمؤقت
مؤقت: ستُضاف المواصفات والقائمة لاحقًا.
مدخلات ما زالت مطلوبة
- مواصفات التطبيق (مثلًا: "تطبيق من صفحة واحدة لتسجيل مصاريف متجري اليومية حسب الفئة وعرض المجموع الشهري، ويحفظ البيانات على جهازي").
- قائمة القبول: من 5 إلى 8 أشياء يجب أن يفعلها التطبيق.
- مختبِر لم يكتب كودًا من قبل، والأدوات والخطط التي ستُختبر.