ما هو منظم النشاط في keras؟

ما هو منظم النشاط في keras؟
ما هو منظم النشاط في keras؟
Anonim

المنظمونيسمحون لك بتطبيق عقوبات على معلمات الطبقة أو نشاط الطبقة أثناء التحسين. يتم تلخيص هذه العقوبات في وظيفة الخسارة التي تعمل الشبكة على تحسينها. يتم تطبيق عقوبات التسوية على أساس كل طبقة.

ما هو منظم النشاط؟

يعمل منظم النشاطكدالة لإخراج الشبكة، ويستخدم في الغالب لتنظيم الوحدات المخفية ، بينما يعمل weight_normizer ، كما يقول الاسم ، على الأوزان (على سبيل المثال جعلها تتحلل).

متى يجب علي استخدام منظم النشاط؟

إذا كنت تريد أن تمر وظيفة الإخراج عبر(أو أن يكون لديك اعتراض أقرب إلى) الأصل ، فيمكنك استخدام منظم التحيز. إذا كنت تريد أن يكون الناتج أصغر (أو أقرب إلى 0) ، يمكنك استخدام منظم النشاط.

كيف يمكنني استخدام منظم Keras؟

لإضافة منظم إلى طبقة ، لديك ببساطةلتمرير تقنية التنظيم المفضل إلى وسيطة الكلمة الأساسية للطبقة 'kernel_normizer'. يمكن أن توفر طرق تنفيذ تسوية Keras معلمة تمثل قيمة معلمة التنظيم الفائقة.

ما هو النواة والتحيز؟

فئة كثيفة

Dense تنفذ العملية: الإخراج=التنشيط (نقطة (المدخلات ، النواة) + التحيز) حيث التنشيط هو وظيفة التنشيط الحكيمة التي تم تمريرها كوسيطة التنشيط ،النواة عبارة عن مصفوفة أوزان تم إنشاؤها بواسطة الطبقةوالتحيز هو متجه تحيز تم إنشاؤه بواسطة الطبقة (ينطبق فقط إذا كانت قيمة use_bias صحيحة).

موصى به: