이재성 트웰브랩스 최고경영자(CEO)가 1일(현지시간) AWS 리인벤트 2025 현장에서 기자들을 만나 인터뷰하고 있다. [사진 = 안선제 기자]



“전 세계 데이터의 90%가 영상임에도 검색은 거의 불가능한 실정입니다. 방대한 영상 데이터를 보유한 고객들이 이를 검색 가능한 자산으로 만들어, 새로운 콘텐츠를 빠르게 만들 수 있도록 돕겠습니다.”

이재성 트웰브랩스 최고경영자(CEO)는 1일(현지시간) 미국 라스베이거스에서 열리고 있는 아마존웹서비스(AWS)의 연례 컨퍼런스 ‘리인벤트(re: 바다이야기예시야마토게임 Invent) 2025’ 현장에서 기자들과 만나 “영상 검색 인공지능(AI) 모델 ‘마렝고 3.0(Marengo 3.0)’을 공식 출시한다”며 이같이 밝혔다.
트웰브랩스는 2021년 창업 이후 NEA, 엔비디아(NVentures), 인덱스벤처스, 래디컬벤처스 등 글로벌 유력 투자사로부터 누적 약 1억 700만 달러(약 1500억 원) 규모 사이다릴게임 의 투자를 유치한 글로벌 영상 AI 스타트업이다. 트웰브랩스의 모델은 크게 AI 영상 이해 모델 ‘마렝고’와 AI 영상언어 생성 모델 ‘페가수스’로 나뉘는데, 이번에 공개된 신규 모델은 마렝고 시리즈의 최신 버전이다.
마렝고 3.0은 수많은 정교한 테스트를 거쳐 스토리지 비용 50% 절감, 인덱싱 속도 2배 향상 등 즉각적인 효율성 개선을 릴짱 이뤄냈다. 이 대표는 “마치 거대언어모델(LLM)의 토큰 가격이 저렴해지면서 다양한 유즈 케이스가 폭발적으로 늘어난 것처럼, 이제 엔터프라이즈 고객들이 보유한 모든 영상을 비용 걱정 없이 인덱싱하고 검색할 수 있는 시대가 다가오고 있다”며 “향후 4~5년 안에 전 세계 영상 데이터의 상당 부분을 마렝고 모델로 인덱싱하는 것을 목표”라고 전했다.
야마토통기계 이번 모델은 단순히 영상을 ‘보는’ 수준을 넘어, 영상 속 장면의 텍스트·음성·움직임·상황 맥락을 통합적으로 이해하는 차세대 비디오 파운데이션 모델로, 지금까지 트웰브랩스가 선보인 모델 중 가장 강력한 기능을 갖췄다. 총 36개 언어를 지원해 글로벌 확장성도 확보했다.
마렝고 3.0은 영상 속 대사와 몇 분 후에 등장하는 동작을 바다이야기고래 연결해 해석하고, 사물·행동·감정·상황 변화를 시간의 흐름에 따라 추적하는 등 인간에 가까운 수준의 영상 이해 능력을 구현한다. 이는 기존의 프레임 단위 분석이나 이미지·오디오 모델의 단순 조합 방식에서 벗어나, 영상 이해를 목적으로 처음부터 설계된 ‘네이티브 파운데이션 구조’를 기반으로 영상 전체를 시공간적으로 해석하는 고유한 아키텍처를 갖췄기 때문이다.



이재성 트웰브랩스 최고경영자(CEO)가 1일(현지시간) AWS 리인벤트 2025 현장에서 기자들을 만나 인터뷰하고 있다. [사진 = 아마존웹서비스(AWS) ]



특히 스포츠 분야에 큰 공을 들였다는 게 이 대표의 설명이다. 그는 “스포츠 분야에 특화된 역량을 대폭 강화했다”며 “선수들의 특정 모션이나 각 종목에서 사용하는 전문 용어 등을 AI가 자연스럽게 이해할 수 있어, 스포츠 구단이 팬 참여 플랫폼을 구축하거나 개인화된 하이라이트 영상을 제작할 때 매우 유용하게 쓰일 것”이라고 설명했다. 가령 특정 선수의 득점 장면이나 결정적 플레이만을 즉시 검색해 하이라이트를 빠르게 제작할 수 있게 되는 것이다.

이 대표는 “특히 EPL(잉글랜드 프리미어 리그), 레이싱 등의 스포츠 경기가 열리는 유럽 쪽 반응이 뜨겁다”며 “이러한 수요에 대응하기 위해 영국 지사도 설립했다”고 덧붙였다.
이외에도 미디어·엔터테인먼트·광고는 물론, 공공·보안·국방 등의 영상 분석 환경에서도 수요가 크게 증가하고 있어 관련 콘텐츠 이해 능력이 대폭 강화됐다. 특히 CCTV 영상 전체를 몇 시간씩 돌려볼 필요 없이 빠르게 원하는 장면만을 정확하게 찾아낼 수 있어 마렝고는 이미 국내외 여러 기관들의 러브콜을 받고 있다. 세종시의 CCTV 분석 작업은 물론, 미국 경찰의 바디캠 영상 분석에 이미 트웰브랩스의 모델이 활용되고 있다.
또한 이번 모델에서 눈에 띄는 부분은 업계 최초로 이미지와 텍스트를 동시에 검색할 수 있는 ‘복합 이미지 검색’ 기능과 ‘사람’이나 ‘제품’을 별도로 등록해 찾아볼 수 있는 ‘고유명사 검색’ 기능의 도입이다. 예를 들어 마렝고 3.0에 ‘손흥민’이라는 고유명사를 등록해두면, 수천 시간의 경기 영상 속에서 손흥민 선수가 등장해 골을 넣거나, 넘어지거나, 특정 세리머니를 하는 장면만 핀셋처럼 집어낼 수 있게 된다.
트웰브랩스는 내년 1분기 출시를 목표로 새로운 솔루션인 영상 AI 에이전트도 준비 중이다. 이 대표는 “트웰브랩스는 비디오 처리부터 추론, 모델, API(앱프로그래밍 인터페이스) 등 모든 레이어를 자체적으로 보유하고 있는 흔치 않은 ‘풀스택 회사’”이라며 “기존 고객들이 마렝고와 페가수스 모델을 활용한 사례들을 결합해 하나의 완성된 체계로 만드는 작업을 진행하고 있다”고 말했다. 이어 “다가오는 에이전트 시대에 수많은 AI 시스템들이 영상 데이터를 빠르고 효율적으로 활용할 수 있는 프레임워크를 제시하는 것이 단기적인 목표”라고 밝혔다.
한편 트웰브랩스는 AWS와 긴밀한 협력 관계를 구축하고 있다. 올해 7월 한국 AI 기업 중 최초로 자사 모델 ‘마렝고’와 ‘페가수스’를 아마존 베드록(Bedrock)에 공식 등록한 것이 대표적이다. 이 대표는 “현재 3만 곳이 넘는 기업 및 개발자가 베드록을 통해 트웰브랩스의 솔루션을 사용하고 있으며, 이 중 상당수가 엔터프라이즈 고객”이라고 밝혔다.
이어 그는 “이미지나 PDF 문서 등은 대부분 클라우드로 전환되었지만, 영상 데이터는 여전히 온프레미스 환경에 머물러 있는 경우가 많다”며 “‘클라우드 마이그레이션 2.0’ 시대의 핵심은 비디오가 될 것이라는 가설 하에, AWS와 함께 영상 데이터의 클라우드 전환을 가속화하기 위해 노력하고 있다”고 강조했다.
[ 라스베이거스=안선제 기자 ]



마렝고 3.0의 비디오 검색 관련 벤치마크 성능 [사진 = 트웰브랩스] 기자 admin@seastorygame.to