تهيئة الشبكة العصبونية

يستخدم هذا التمرين بيانات XOR مرة أخرى، ولكنه يأخذ في الاعتبار قابلية التكرار تدريب الشبكات العصبية وأهمية التهيئة.

المهمة 1: نفِّذ النموذج على النحو المحدّد أربع أو خمس مرات. قبل كل تجربة، انقر على الزر إعادة ضبط الشبكة للحصول على إعداد عشوائي جديد. (زر إعادة ضبط الشبكة هو سهم إعادة الضبط الدائري يسار زر التشغيل). السماح بتشغيل كل تجربة لمدة 500 خطوة على الأقل لضمان التقارب. ما الشكل الذي يتقارب معه ناتج كل نموذج؟ ماذا يقول هذا عن دور التهيئة في الخلايا غير المحدبة التحسين؟

المهمة 2: حاول جعل النموذج أكثر تعقيدًا قليلاً من خلال إضافة طبقة وعقدين إضافيين. كرر التجارب من المهمة 1. هل هذا إضافة أي استقرار إضافي إلى النتائج؟

(تظهر الإجابات أسفل التمرين مباشرةً.)

---

---

انقر فوق رمز الإضافة للحصول على إجابة على المهمة 1.

كان للنموذج الذي تم تعلمه أشكال مختلفة في كل تمرين. المتقارب تراوحت نسبة فقدان الاختبارات تقريبًا من الضعف إلى الأعلى.

انقر فوق رمز الإضافة للحصول على إجابة على المهمة 2.

أدت إضافة الطبقة والعُقد الإضافية إلى الحصول على نتائج أكثر تكرارًا. وفي كل مرة، بدا النموذج الناتج متشابهًا تقريبًا. بالإضافة إلى ذلك، أظهرت خسارة الاختبار المتقارب تباينًا أقل بين عمليات التشغيل.