VLM 비전 언어 모델이란 - 기존 AI와 차이, 사전학습과 파인튜닝, 활용 분야
VLM은 갑자기 등장한 기술이 아니다. 따로 발전해온 컴퓨터 비전과 자연어 처리를 왜 이제야 합치게 됐는지, 어디에 먼저 쓰일지 서울대 AI 박사의 설명으로 정리했다.
핵심 내용 읽기 →
AI TOPIC
VLM 최신 뉴스와 핵심 해설
VLM 관련 핵심 뉴스와 활용 인사이트 5편을 최신순으로 모았습니다.
AI 영상 생성 평가: 캐릭터AI가 'AI 슬롭'을 걸러내는 소형 VLM 평가 모델 개발기
AI 영상 생성은 사실상 공짜가 됐지만 대부분은 품질이 낮다. 캐릭터AI의 마오르 브릴이 프레임 단위 지표를 넘어 '이야기·물리·오디오 싱크'까지 평가하는 소형 VLM 방식을 소개한다.
핵심 내용 읽기 →
비전 언어 모델 VLM 입문: CLIP·공동 임베딩·멀티모달 LLM 이해하기
글과 이미지를 하나의 공동 임베딩 공간에서 다루는 비전 언어 모델(VLM)의 기본 원리를 CLIP, 인코더 구성, 초기·후기·교차어텐션 융합, VLA·VLP 응용까지 정리했다.
핵심 내용 읽기 →
VLM 기반 테스트 타임 어댑테이션(TTA) 정리: 제로샷·프롬프트 튜닝·인코더 튜닝
학습이 끝난 모델이 처음 보는 데이터를 만나는 테스트 시점에 스스로 적응하는 TTA를, 비전·언어 모델 기반의 제로샷·프롬프트 튜닝·인코더 튜닝 세 갈래로 풀어 설명합니다.
핵심 내용 읽기 →
비전 언어 모델(VLM)이란? AI가 이미지를 이해하는 원리와 활용
텍스트만 다루던 LLM에 시각을 더한 비전 언어 모델(VLM). 비전 인코더와 프로젝터로 이미지를 토큰으로 바꿔 사진·문서·그래프를 해석하는 원리와 한계를 IBM 설명으로 정리했다.
핵심 내용 읽기 →