Underfitting1 Underfitting and Overfitting Underfitting : 지나친 단순화로 인해 에러가 많이 발생하는 현상Overfitting: 너무 정확하게 표현한 나머지 에러가 나는 현상Overfitting의 원인과 해결방법1. Model Capacity모델이 더 복잡한 형상을 나타낼 수 있는 정도를 의미MLP에서 Model Capacity를 늘리려면 layer를 더 deep하게 쌓거나 layer당 hidden unit 개수를 늘린다.Model Capacity를 무한정 늘린다면 overfitting이 발생True Risk: 이상적으로 가져올 수 있는 모든 데이터에 대해 계산한 error, loss. 앞으로 어떤 데이터가 들어올지 모르므로, 실제로 줄여야 하는 것은 True RiskEmpirical Risk: 이상적으로 가져올 수 있는 데이터 중 일.. 2024. 8. 5. 이전 1 다음