Vision Banana, 이미지 생성기를 범용 시각 모델로 바꾸는 전환점
이미지 생성 모델이 시각 이해의 중심으로 들어왔다. DeepMind는 Nano Banana Pro 기반 Vision Banana가 소규모 instruction tuning만으로 Segment Anything, Depth Anything 계열과 겨루며 여러 2D·3D 과제에서 state-of-the-art 성능을 냈다고 소개했다.
원문: Image Generators are Generalist Vision Learners 원문 보기 →
컴퓨터 비전은 과제마다 다른 전문 모델을 늘려 왔다. 분할엔 분할 모델, 깊이 추정엔 depth 모델, 3D 이해엔 또 다른 모델이 붙었다. Google DeepMind 논문 페이지가 던지는 메시지는 반대다. 이미지 생성기 하나를 충분히 잘 학습시키면, 여러 시각 과제를 같은 생성 인터페이스 위에서 처리할 수 있다는 주장이다.
논문의 중심 모델은 Vision Banana다. Nano Banana Pro를 바탕으로 만들었고, 원래의 이미지 생성 데이터에 소량의 비전 과제 데이터를 더해 instruction tuning했다. 흥미로운 지점은 출력 형식이다. 팀은 분할, 깊이 추정, 기타 시각 과제를 별도 헤드로 나누지 않고 RGB 이미지 생성 문제로 다시 표현했다. 생성 능력을 그대로 활용하겠다는 선택이다.
DeepMind는 이 방식이 여러 2D·3D 이해 과제에서 state-of-the-art 결과를 냈다고 적었다. 특히 segmentation에서는 Segment Anything 계열을, metric depth estimation에서는 Depth Anything 계열을 따라잡거나 앞섰다고 설명한다. 생성 모델이 보기 좋은 그림을 만드는 수준을 넘어, 장면을 구조적으로 읽는 모델로 올라섰다는 선언에 가깝다.
더 눈에 띄는 대목은 비용 구조다. 논문은 Vision Banana가 모델을 처음부터 새로 짜는 방식이 아니라 가벼운 instruction tuning으로 성능을 끌어올렸고, 그 과정에서도 원래의 이미지 생성 능력을 잃지 않았다고 말한다. 이 주장이 맞으면, 같은 기반 모델이 생성, 분할, 깊이 추정 같은 작업을 함께 맡는 그림이 가능해진다.
아직 arXiv 결과이고, 벤치 구성과 일반화 범위를 더 뜯어봐야 한다. 그래도 방향은 선명하다. 업계가 생성 모델을 화려한 부가기능으로 다루던 단계는 끝났고, 시각 이해 전체를 묶는 기반 모델 후보로 보기 시작했다.
관련 기사
Pixel 11, 수어를 영어로 바꾸는 Google DeepMind SL2T로 입력 장벽 축소
Pixel 11이 미국 수어를 영어 문장으로 바꿔 Gboard와 Live Transcribe에 입력한다. SL2T는 자세 추적을 기기에서 처리하고 번역만 서버에 맡겨, 키보드 없이 대화하는 새 입력 경로를 연다.
NVIDIA, Hugging Face 129억3030만달러 인수…오픈 모델 플랫폼 독립성 유지
NVIDIA가 Hugging Face를 129억3030만달러에 인수하기로 합의하며 1,800만 개발자와 300만개 모델이 모인 오픈 AI 생태계를 품는다. 양사는 NVIDIA 하드웨어를 강제하지 않고 멀티클라우드·멀티가속기 중립성을 유지하겠다고 약속했으며, 규제 심사가 다음 변수다.
Crusoe, 30억달러 조달로 기업가치 300억달러…AI 데이터센터 몸값 세 배
AI 데이터센터 개발사 Crusoe가 30억달러를 조달하며 기업가치 300억달러에 도달했다. 10개월 전 100억달러에서 세 배로 뛴 평가는 모델 경쟁만큼 거세진 전력·GPU 공급 경쟁을 보여준다.