QPrompt 논문 리뷰: 프롬프트 양자화로 CLIP 같은 비전-언어 모델의 일반화 성능을 끌어올리는 방법
CLIP 같은 비전-언어 모델의 프롬프트를 연속값 대신 이산 코드북으로 양자화하면 학습하지 않은 클래스에서 성능이 오른다. 양자화 오류를 일반화에 유리한 노이즈로 활용한 QPrompt 논문 리뷰를 정리했다.
핵심 내용 읽기 →
AI TOPIC
프롬프트 튜닝 최신 뉴스와 핵심 해설
프롬프트 튜닝 관련 핵심 뉴스와 활용 인사이트 3편을 최신순으로 모았습니다.
연합학습(Federated Learning)에 VLM 프롬프트 튜닝 — PromptFL·FedOTP·FedMGP 정리
고려대 김성범 교수 연구실 세미나가 데이터를 공유하지 않는 연합학습에 비전-언어 모델(VLM) 프롬프트 튜닝을 접목한 세 연구 PromptFL·FedOTP·FedMGP로 데이터 이질성 문제를 짚는다.
핵심 내용 읽기 →
VLM 기반 테스트 타임 어댑테이션(TTA) 정리: 제로샷·프롬프트 튜닝·인코더 튜닝
학습이 끝난 모델이 처음 보는 데이터를 만나는 테스트 시점에 스스로 적응하는 TTA를, 비전·언어 모델 기반의 제로샷·프롬프트 튜닝·인코더 튜닝 세 갈래로 풀어 설명합니다.
핵심 내용 읽기 →