AI 모델의 설계 기준이 근본적으로 변화하고 있습니다. 과거의 AI가 텍스트나 이미지 중 하나의 데이터 유형을 처리하는 데 집중했다면, 최신 생성형 AI는 이미지, 음성, 영상, 나아가 물리적 감각까지 동시에 이해하는 ‘멀티모달 AI(Multimodal AI)’를 출발점으로 삼고 있습니다. 그리고 이 변화는 모델 경쟁을 넘어 실제 산업 현장으로까지 이어지고 있습니다.

글로벌 시장 분석 기관에 따르면, 멀티모달 AI 시장은 2030년까지 연평균 36%이상의 고성장을 기록할 것으로 전망됩니다. 이는 멀티모달이 단순한 기술적 유행이 아니라, AI가 복잡한 현실 세계의 맥락을 이해하고 판단하기 위한 필수적인 인지 체계로 자리 잡았음을 의미합니다.

GPT, 구글 제미나이(Gemini), 클로드(Claude) 등 주요 AI 모델들은 최신 버전으로 올수록 멀티모달 처리를 기본 구조로 설계하고 있습니다. 과거에는 텍스트 모델에 이미지 기능을 별도로 이어 붙이는 방식이었다면, 이제는 처음부터 모든 데이터 유형을 통합 학습(Native Multimodal)하는 구조가 모델의 출발점이 되고 있습니다.

특히 기업 업무 환경에서는 이러한 변화가 더욱 빠르게 체감되고 있습니다. 마이크로소프트의 코파일럿은 워드, 엑셀, 파워포인트 문서와 팀즈 회의 음성, 이메일, 조직 데이터를 함께 분석해 업무를 지원합니다. 구글 워크스페이스에서도 제미나이가 드라이브에 저장된 회의 영상이나 발표 영상을 분석해 핵심 내용을 정리하는 기능이 도입되고 있습니다. 단일 입력이 아니라 여러 데이터를 동시에 이해하고 작업을 연결하는 업무 파트너 형태로 발전하고 있는 것입니다. 이처럼 멀티모달 AI는 단순히 입력 방식이 늘어난 기술이 아니라, AI가 복합적인 상황을 이해하고 판단하는 능력 자체를 확장하는 방향으로 발전하고 있죠.

멀티모달 AI의 변화는 연구실이나 사무실에만 머물지 않습니다. 실제 산업 현장에서도 그 흔적이 나타나고 있는데요. 대표적인 사례가 아마존의 물류 로봇 ‘벌컨(Vulcan)’입니다. 2025년 공개된 이 로봇은 카메라 기반 시각 인식뿐 아니라 촉각 센서를 활용해 물체를 감지하고 조작할 수 있도록 설계됐습니다. 물체의 위치를 보는 것뿐 아니라 손으로 느끼는 것까지 결합한 멀티모달 인지 구조가 적용된 사례입니다.

물류 산업에서도 비슷한 흐름이 나타나고 있습니다. 글로벌 물류 기업 GXO로지스틱스는 창고 환경에서 휴머노이드 로봇 파일럿을 운영하며 실제 작업 환경에서 테스트를 진행하고 있습니다. 어질리티 로보틱스(Agility Robotics)의 휴머노이드 로봇 ‘디짓(Digit)’ 역시 물류와 제조 환경에서 현장 적용 테스트가 확대되고 있고요. 연구 데모가 아니라 실제 운영 환경에서 기술 검증이 진행되고 있는 단계입니다.

최근에는 로봇을 위한 범용 AI 모델 경쟁도 시작되고 있습니다. 스타트업 스킬드 AI(Skild AI)는 다양한 로봇에 적용할 수 있는 범용 인공지능 모델 ‘스킬드 브레인(Skild Brain)’을 공개했습니다. 특정 기계에 맞춘 알고리즘이 아니라 여러 로봇에 적용할 수 있는 ‘AI 로보틱스 파운데이션 모델’ 경쟁이 시작되고 있다는 점에서 주목할 만합니다.

리서치 기관 Precedence Research에 따르면 글로벌 AI 로보틱스 시장은 2024년 약 153억 달러(한화 약 22조 1,238억 원)에서 2034년 약 950억 달러(137조 3,700억 원) 규모까지 성장할 것으로 전망됩니다. 이는 AI가 소프트웨어 영역을 넘어 실제 환경에서 판단하고 행동하는 기술로 확장되고 있음을 보여주는 지표입니다.

이 성장의 배경에는 멀티모달 AI가 있습니다. 다양한 센서 데이터와 환경 정보를 동시에 이해할 수 있어야 로봇이나 자율 시스템이 현실 세계에서 안정적으로 작동할 수 있기 때문입니다. 결국 피지컬 AI의 경쟁력은 하드웨어보다 얼마나 정교한 멀티모달 인지 체계를 갖추고 있는가에 달려 있습니다.

멀티모달 AI가 에이전트 기반 시스템이나 물리 환경으로 확장되면서, 기업의 AI 인프라 전략과 운영 가시성 확보가 그 어느 때보다 중요해지고 있습니다. 멀티모달 데이터(영상, 센서 값 등)는 일반 텍스트 대비 데이터 크기가 수백 배에 달하기 때문에 스토리지 I/O 병목 현상을 일으킬 수 있습니다. 성공적인 멀티모달 AI 도입을 위해 기업이 점검해야 할 핵심 요소는 다음과 같습니다.

• 비정형 데이터 파이프라인: 텍스트 외 음성·영상·센서 데이터를 실시간으로 수집하고 처리할 수 있는 확장성 확보
• 분산 추론(Distributed Inference) 환경: 대규모 멀티모달 워크로드를 감당하기 위한 GPU 자원 최적화 및 인프라 설계
• 운영 가시성(Observability) 체계: AI 에이전트 기반 워크로드의 변동성을 실시간 모니터링하고 비용 효율성을 관리할 수 있는 거버넌스

멀티모달 AI는 더 이상 미래의 기술이 아닙니다. 이미 우리 업무 환경과 산업 현장 깊숙이 들어와 비즈니스의 복잡한 문제를 해결하는 강력한 동력이 되고 있기 때문이죠. 하지만 모델이 보고, 듣고, 행동하는 능력이 커질수록 기업이 감당해야 할 데이터의 무게와 인프라의 변동성 또한 커지기 마련입니다.

결국 AI 전환(AX)의 진정한 차별화는 단순히 앞선 모델을 도입하는 것이 아니라, 그 모델이 비즈니스 현장에서 중단 없이 안정적으로 작동할 수 있도록 뒷받침하는 ‘운영 인프라의 완결성’에서 나옵니다. 텍스트를 넘어 물리적 세계와 소통하는 멀티모달 시대, 베스핀글로벌은 기업이 AI의 무한한 가능성을 가장 안정적인 인프라 위에서 실현할 수 있도록 최적의 운영 전략을 함께 설계하겠습니다.

※매주 화요일, 베스핀글로벌 뉴스레터 베스픽을 통해 최신 IT 업계 이슈•트렌드를 누구보다 빠르게 확인해보세요!