معايير التحكيم التي تختار الفائز الصحيح

معايير التحكيم الجيدة تنبع مباشرة من غرض الفعالية: إن كنت تريد فكرة تجرّبها ميدانياً فأعطِ الوزن الأكبر لقابلية التنفيذ والأدلة، وإن كنت تريد طريقة تفكير جديدة فأعطِه للأصالة وعمق الفهم. اكتفِ بأربعة أو خمسة معايير، ووزّع أوزانها، واكتب وصفاً قصيراً لكل درجة، وانشرها مع التحدي، ووحّد فهم المحكّمين قبل العرض الأول. هذه الخطوات بالتفصيل.

لماذا يفشل التحكيم

معظم مشكلات التحكيم مشكلات تصميم لا مشكلات أشخاص. النمط المعتاد: خمسة معايير منقولة من فعالية أخرى (الابتكار، الأثر، قابلية التنفيذ، التصميم، العرض)، بأوزان متساوية، وسلّم من 1 إلى 10 لم يعرّفه أحد، ومحكّمون يلتقون لأول مرة قبل العروض بعشر دقائق. فيفوز صاحب العرض الأكثر ثقة، ويختلف المحكّمون لأسباب لا يستطيعون شرحها، ويغادر الفريق صاحب الفكرة الأكثر وعداً متسائلاً أين أخطأ.

وهناك أيضاً انحياز موثّق. وصف عالم النفس إدوارد ثورندايك عام 1920 ما سمّاه تأثير الهالة (Halo Effect): حين يكوّن المقيّم انطباعاً قوياً عن صفة واحدة، يلوّن هذا الانطباع تقييمه لكل ما عداها. العرض المصقول يجعل الفكرة تبدو أسهل تنفيذاً، والفريق أكفأ، والأثر أكبر. وفي ثقافة عمل يحظى فيها حسن الإلقاء والحضور بتقدير كبير، يصبح هذا الانحياز أقوى. المعايير الجيدة والإجراءات المنضبطة هي خط الدفاع الأول.

سبع خطوات لمعايير تعمل فعلاً

1. ابدأ مما ستفعله بالفائز. عُد إلى غرض الفعالية والتزام مالك التحدي (انظر كيف تكتب بيان تحدٍّ يرغب الناس في حله). إن كان المالك سيجرّب الفكرة الفائزة خلال تسعين يوماً، فعلى المعايير أن تكافئ الأفكار القابلة للتجربة فعلاً في تسعين يوماً. وإن كان الهدف استكشاف زوايا جديدة للمشكلة، فكافئ الفهم والأصالة واقبل أن يكون الفائز خاماً. اكتب الغرض في أعلى بطاقة التقييم ليراه المحكّمون كل مرة.

2. اختر أربعة أو خمسة معايير لا أكثر. لا يستطيع المحكّم استحضار ثمانية معايير خلال عرض مدته خمس دقائق. أكثر المعايير شيوعاً:

• فهم المشكلة. هل اكتشف الفريق شيئاً صحيحاً عن المتأثرين بها؟
• القيمة. إن نجحت الفكرة، كم ستغيّر لهؤلاء الناس أو للجهة؟
• قابلية التنفيذ. هل يمكن بناؤها وتشغيلها ضمن القيود المعلنة؟
• الأدلة. ماذا اختبر الفريق، ومع من، وماذا تعلّم؟
• الأصالة. هل هي إجابة مختلفة حقاً، أم نسخة مما هو موجود؟

لاحظ الغائب: "العرض". الوضوح مهم، لكنه حين يكون معياراً مستقلاً يكافئ الأداء على حساب المضمون. وإن أدرجته فأعطه أصغر وزن.

3. وزّع الأوزان بحسب الغرض. الأوزان المتساوية قرار متنكّر، وغالباً قرار خاطئ. فعالية هدفها التجربة الميدانية قد تعتمد: القيمة 30%، قابلية التنفيذ 30%، الأدلة 25%، فهم المشكلة 15%. وفعالية استكشافية قد تعتمد: فهم المشكلة 35%، الأصالة 35%، القيمة 20%، قابلية التنفيذ 10%. ومصفوفة القرار الموزونة أبسط طريقة لترتيب ذلك.

4. اكتب ما تعنيه كل درجة. "قابلية التنفيذ: من 1 إلى 5" تفتح الباب لخمسة تفسيرات. اكتب وصفاً قصيراً للدرجة الدنيا والوسطى والعليا. مثلاً لمعيار الأدلة: 1: لا تواصل مع مستخدمين ولا بيانات؛ 3: تحدّث مع بعض المستخدمين أو اختبر افتراضاً واحداً؛ 5: اختبر أخطر افتراض مع مستخدمين حقيقيين وعدّل الفكرة بناءً على النتيجة. هذه الأوصاف تحوّل الرأي إلى حكم، وتجعل الخلاف مفيداً لأن المحكّمين يستطيعون الإشارة إلى النص. وما تطلبه من الفرق هنا هو بالضبط خريطة الافتراضات واختبار الفرضية، فقل ذلك صراحة.

5. انشر كل شيء مع التحدي. يجب أن ترى الفرق المعايير والأوزان والأوصاف من اليوم الأول. هذا ليس مجاملة؛ إنه الطريقة التي توجّه بها العمل. إن كانت الأدلة ربع الدرجة فستخرج الفرق للبحث عن مستخدمين. وإن أعلنت المعايير يوم العرض فستكون الفرق قد اجتهدت في الشرائح. وهذا أحد 9 أخطاء في الهاكاثون يكررها المنظمون.

6. وحّد فهم المحكّمين قبل العروض. اجمع المحكّمين في اليوم السابق، أو قبل ساعة على الأقل. استعرض الغرض والمعايير والأوصاف، ثم اطلب من كل منهم تقييم مشاركة نموذجية، سابقة أو مفترضة، منفرداً، وقارنوا الدرجات وناقشوا الفروق. عشر دقائق من هذه المعايرة تزيل معظم الخلاف الذي كان سيظهر في النهاية. اطلب من المحكّمين الإفصاح عن أي تعارض مصالح، وتأكد أن بينهم الشخص الذي سيتبنى الفكرة الفائزة.

7. احكم على العمل لا على العرض وحده. امنح المحكّمين وقتاً مع كل فريق قبل العروض الختامية: عشر دقائق عند طاولته، ينظرون إلى النموذج الأولي ويسألون عمّا اختبره. ليقيّم كل محكّم منفرداً أولاً، ثم تبدأ المداولة. ناقشوا الفرق التي تتباعد درجاتها أكثر، لا التي اتفق عليها الجميع. واجعلوا المجموع نقطة انطلاق للقرار لا آلة تتخذه، وإن خالفت اللجنة الأرقام فلتُكتب الأسباب. وبعد الفعالية، أرسل لكل فريق ملاحظات مكتوبة قصيرة مقابل المعايير؛ وشبكة رصد الملاحظات تحافظ على تنظيمها.

نموذج لبطاقة التقييم

عدّل الأوزان بحسب غرضك. وقيّم المشاركة دائماً، لا الأفراد داخل الفريق.

افعل ولا تفعل

افعل

• اشتق كل معيار من غرض الفعالية.
• اجعل اللجنة صغيرة: من ثلاثة إلى خمسة محكّمين.
• قيّم منفرداً قبل النقاش.
• دوّن أسباب القرار النهائي، خصوصاً حين يخالف المجموع.
• أرسل ملاحظات لكل الفرق، لا للفائزين فقط.

لا تفعل

• لا تجعل أرفع المحكّمين منصباً يتكلم أولاً في المداولة؛ سيبني الآخرون على رأيه، ولن يخالفه أحد بسهولة.
• لا تضف معيار "عامل الإبهار" أو "تقدير اللجنة"؛ فهو يعيد فتح الباب لتأثير الهالة.
• لا تغيّر المعايير أثناء الفعالية.
• لا تستخدم مصفوفة الأثر والجهد أداةً نهائية للتحكيم؛ فهي مفيدة لفرز أولي سريع لعدد كبير من المشاركات، لا لاختيار فائز واحد.

مثال توضيحي

مثال توضيحي. نظّم بنك في الرياض هاكاثوناً داخلياً لتقليص الوقت الذي يستغرقه فتح حساب لمنشأة صغيرة. وكان مدير قطاع المنشآت الصغيرة والمتوسطة قد وافق على تجربة الفكرة الفائزة في فرعين.

في الدورة الأولى، قيّمت اللجنة خمسة معايير متساوية على سلّم من 1 إلى 10 دون أي تعريف. وفاز فريق بعرض متحرك لافت لتطبيق يفتح الحساب آلياً بالكامل. وحين تفحّصه مدير القطاع اتضح أنه يتطلب تعديلاً في النظام المصرفي الأساسي خارج ميزانية التجربة، فلم يتقدم خطوة.

في الدورة التالية، أعاد المنظمون بناء البطاقة حول التجربة: قابلية التنفيذ ضمن أنظمة الفروع الحالية 30%، والقيمة لأصحاب المنشآت 30%، والأدلة 25%، وفهم المشكلة 15%، مع أوصاف مكتوبة لكل درجة. نُشرت البطاقة مع التحدي، وعُقدت جلسة معايرة لعشرين دقيقة مع المحكّمين الخمسة على مشاركة مفترضة، وقضى المحكّمون ثماني دقائق عند كل طاولة قبل العروض. الفريق الفائز قابل ستة من أصحاب المنشآت وثلاثة من موظفي الفروع، واكتشف أن معظم التأخير سببه عودة العميل أكثر من مرة لاستكمال مستندات لم يُبلَّغ بها مسبقاً، فاقترح قائمة مستندات شخصية تُرسل للعميل قبل زيارته الأولى. كان عرضه بسيطاً، ودخل التجربة في الفرعين في الشهر التالي.

أسئلة يطرحها الناس

ما أشهر معايير تحكيم الهاكاثون؟ تجمع معظم الفعاليات بين فهم المشكلة، والقيمة أو الأثر، وقابلية التنفيذ، والأدلة أو الاختبار، والأصالة. والمزيج الصحيح يعتمد على ما ستفعله بالفائز، فاختر المعايير وأوزانها انطلاقاً من غرضك لا من قائمة فعالية أخرى.

هل يكون العرض التقديمي معياراً للتحكيم؟ نادراً بوصفه معياراً مستقلاً، وإن أدرجته فبوزن صغير. وضوح التواصل مهم، لكن مكافأته بقوة تُرجّح كفة الملقين على كفة الفرق صاحبة العمل الأقوى.

كيف أمنع اختلاف المحكّمين؟ اكتب وصفاً لكل درجة، ووحّد الفهم بتقييم مشاركة نموذجية قبل الفعالية، وقيّموا منفردين، ثم ناقشوا أكبر الفروق. والخلاف الذي يبقى بعد ذلك يكون عادةً معلومة مفيدة عن الأفكار نفسها.

إلى أين بعد ذلك

للتصميم الكامل للفعالية، اقرأ كيف تنظم هاكاثوناً يخرج بشيء حقيقي والخريطة الشاملة في الهاكاثونات والجامات والتحديات: كل الأنواع بالتفصيل. وتمنحك أدوات مصفوفة القرار الموزونة وخريطة الافتراضات وشبكة رصد الملاحظات الهيكل اللازم للتقييم، ولما ينبغي أن تختبره الفرق، وللملاحظات بعد الفعالية.