728x90
반응형

딥러닝 구조 2

HyperNetworks

개요HyperNetworks는 다른 신경망의 가중치(파라미터)를 생성하는 '메타 네트워크'입니다. 기존 딥러닝 모델이 정적인 파라미터를 학습하는 반면, HyperNetwork는 주어진 입력이나 조건에 따라 동적으로 파라미터를 생성합니다. 이 접근은 모델 경량화, 다작업 학습(Multi-task learning), 신속한 적응 학습(Few-shot/Meta-learning) 등에서 효율성과 유연성을 제공합니다.1. 개념 및 정의 항목 설명 비고 정의다른 신경망의 가중치를 동적으로 생성하는 신경망Ha et al., 2016 첫 제안목적파라미터 재사용 및 생성 기반 동적 학습 구조 구현모델 간 유연한 파라미터 공유 가능필요성고정 파라미터 구조의 유연성 한계 극복Few-shot, Continual Learn..

Topic 2025.05.30

Capsule Network (캡슐 네트워크)

개요Capsule Network(캡슐 네트워크)는 Geoffrey Hinton 박사가 제안한 딥러닝 아키텍처의 진화 형태로, 전통적인 CNN이 가지는 한계를 극복하기 위해 설계되었습니다. 객체의 위치, 방향, 크기, 계층적 관계를 더 잘 인식할 수 있는 구조로, 특히 이미지 인식, 3D 객체 추정, 의료 영상 분석 등에서 높은 정확도와 해석 가능성을 제공합니다.1. 개념 및 정의캡슐 네트워크는 단순 뉴런이 아닌 벡터 또는 행렬로 표현되는 캡슐(Capsule) 을 기반으로 구성됩니다. 각 캡슐은 특징의 존재 여부뿐만 아니라 '자세(Pose)' 정보까지 함께 학습합니다. 하위 캡슐에서 상위 캡슐로의 연결은 동적 라우팅(Dynamic Routing) 메커니즘을 통해 수행되며, 이는 학습 시 계층 간의 관계성 ..

Topic 2025.04.06
728x90
반응형