rasoulrasoul

من در حال استفاده از یک feedforward backpropagation neural network می باشم، که داده های ورودی 12*304 و خروجی1*304 می باشد و از ابزار nntool استفاده می کنم،
شبکه دولایه مخفی که توابع انتقال برای لایه اول لایه دوم و خروجی : به ترتیب logsig,logsig,tansig
تعداد نورونها در هر لایه مخفی 8
از تابع آموزش trainlm استفاده می کنم
تعداد epoch ها روی 3000 تنظیم شده است
اما همواره پس از آموزش تعداد epoch ها کمتر از 8 می شود.
چرا منحنی validation با افزایش تعداد epoch ها خطا زیاد می شود؟ (نمودار در لینک زیر)) آیا ساختار شبکه من مشکلی دارد؟

https://drive.google.com/file/d/0B7_...ew?usp=sharing

mahdiii

احتمالا چون برای داده های اموزشی خطا کم میشه اما برای داده های تست خیر
شاید بیش برازش overfitting رخ داده. تعداد نرونهای مخفی رو کم کنین ببینید چی میشه
همچنین لایه مخفی رو یک کنین.
مشکل دیگه شاید تو نحوه انتخاب داده هاتون باشه و تقسیم بندی داده های آموزشی تست و اعتبارسنجیتون

اونها رو رندم انتخاب نکنین چون امکان داره برای یک کلاس، داده های آموزشی انتخاب نشن و بجاش برای کلاس دیگه داده های آموزشی زیادی انتخاب بشه.
مثلا فرض کنین دو کلاس داریم داده هامون 10 تا مربوط به کلاس اول و 10 تا کلاس دوم..
حالا اگه از این 20 تا مثلا 10 تاش آموزشی انتخاب بشن و رندم این کار صورت بگیره شاید امکان داره که اون 10 تا همش از یک کلاس انتخاب بشن و بنابراین درست شبکه اموزش داده نشه بهتره اندیسها به صورت دستی مشخص بشه که کدوم داده ها برای آموزش انتخاب بشن و کدوم تست و اعتبارسنجی