Conv2D의 kernel_size를 3×3·5×5·1×1로 비교했을 때 1×1이 완전히 실패한 이야기【Keras × CIFAR-10】

요약

본 기사는 Conv2D 레이어의 커널 크기(kernel_size)를 (3, 3), (5, 5), (1, 1) 세 가지 패턴으로 비교 분석한 실험 결과를 다룹니다. CIFAR-10 데이터셋을 사용한 테스트에서 (5, 5)가 가장 높은 정확도(69.70%)를 보였으나, 파라미터 수와 학습 시간 측면에서는 비용이 높았습니다. 반면, (3, 3)은 적절한 균형점을 보여주었으며, (1, 1) 커널 크기는 성능 저하가 두드러지게 나타나 가장 낮은 정확도를 기록했습니다.

핵심 포인트

• 커널 크기 선택은 모델의 성능(정확도), 계산 비용(파라미터 수), 학습 속도에 직접적인 영향을 미친다.
• (5, 5) 커널은 넓은 범위의 특징을 포착하여 높은 정확도를 달성할 수 있지만, 파라미터 증가로 인해 계산 비용이 크게 높아진다.
• 실험 결과, (3, 3) 커널 크기는 성능과 효율성 사이에서 합리적인 균형점을 제공하는 것으로 나타났다.
• (1, 1) 커널은 가장 적은 파라미터를 가지지만, 특징 포착 능력이 부족하여 모델의 최종 정확도에 부정적인 영향을 미칠 수 있다.