NeurIPS는 인공지능 분야에서 세계적으로 권위 있는 학술대회로, BK 우수국제학술대회(인정 IF 4.0)로 등록되어 있으며, 오는 11월 30일부터 12월 7일까지 미국 샌디에이고와 멕시코시티에서 개최될 예정이다.
이번 논문은 ‘OVS Meets Continual Learning: Towards Sustainable Open-Vocabulary Segmentation’이라는 제목으로, 추가 학습 데이터가 주어질 때 기존의 fine-tuning, retraining, continual learning 접근법이 OVS 모델의 인식 능력을 충분히 확장하지 못한다는 한계를 지적한다.
이번 연구팀은 이를 해결하기 위해 OVS용 연속학습 프레임워크 ConOVS를 제안한다. ConOVS는 입력 샘플에 따라 디코더 가중치를 동적으로 병합하는 Mixture-of-Experts 전략을 사용한다.
새로운 데이터셋이 추가될 때마다 디코더를 경량 미세 조정하고, 샘플 단위로 원본 모델과 전문가(Expert) 디코더 사이의 가중치 보간/병합을 수행해 기존 모델의 성능 저하 없이 능력을 확장한다.
특히 이번 연구는 OVS의 현실적 한계를 겨냥해 추가 데이터 수용성, 비용 효율성, 일반화를 동시에 고려한 방법론을 제시한다. 산업 및 학계에서의 지속 가능한 OVS 구축에 직접적인 기준점을 제공할 것으로 전망된다.
bjlee@beyondpost.co.kr
