구글 이미지인식·제미나이 결합
추가 질문까지 '맞춤 검색' 제공
챗GPT, 이미지 기반 대화 구현
네이버·삼성전자 등도 속속 참전
추가 질문까지 '맞춤 검색' 제공
챗GPT, 이미지 기반 대화 구현
네이버·삼성전자 등도 속속 참전
인공지능 '멀티모달 검색'
검색의 중심이 키보드에서 카메라로 옮겨가고 있다. 생성형 인공지능(AI)이 텍스트를 넘어 이미지를 이해하는 수준까지 발전하면서 사진 한 장으로 묻고 답하는 '멀티모달 검색' 시대가 열렸다. 사용자가 복잡한 키워드를 입력하는 대신 카메라로 사물을 촬영하거나 저장된 사진을 올리면 AI가 장면을 해석해 답하는 식으로 검색 환경이 빠르게 바뀌는 모양새다.
7일(현지시간) 테크크런치에 따르면 구글은 실험 기능인 AI 모드에 멀티모달 검색 기능을 추가했다. AI 모드는 구글 렌즈의 이미지 인식 기술과 제미나이 AI를 결합한 형태다. 사용자가 사진을 업로드하거나 촬영하면 AI가 이미지 속 장면을 분석하고 해당 물체의 관계, 재질, 색상, 배열까지 파악한 뒤 풍부한 설명과 함께 관련 정보를 제공한다.
예를 들어 책장이 담긴 사진을 올리고 '이 책들을 좋아했다면 어떤 책이 추천될까'라고 질문하면 AI가 책 제목을 인식한 뒤 비슷한 성향의 도서를 추천해 주는 식이다. '읽기 쉬운 책은 무엇인가' 등 추가 질문도 가능하다. 키워드 검색만으로는 어려웠던 개인 맞춤형 검색이 자연스럽게 구현되는 셈이다.
기존에는 구글 원 AI 프리미엄 구독자에게만 제공되던 AI 모드는 이날부터 미국 내 수백만 명의 랩스 사용자에게도 개방됐다. 구글은 "AI 모드는 우리가 수년간 연구해 온 비주얼 서치 기술을 한 단계 끌어올린 것"이라며 "이미지와 이미지 속 객체에 대해 다각도로 질문을 생성하는 '팬아웃' 기법을 적용했다"고 설명했다.
구글은 이런 검색 기능을 iOS와 안드로이드 앱을 통해 제공하고 있다. 최근에는 스마트폰 카메라나 화면을 활용해 실시간으로 제미나이와 대화할 수 있는 '제미나이 라이브' 기능도 공개됐다. 화면 공유나 카메라 입력을 통해 사용자가 보고 있는 장면을 AI가 인식하고 실시간 조언을 제공하는 방식이다.
멀티모달 검색 경쟁은 구글뿐 아니라 오픈AI와 퍼플렉시티도 가세하고 있다. 오픈AI는 지난달 공개한 최신 모델 GPT-4o를 통해 챗GPT 유료 사용자에게 이미지 기반 대화 기능을 지원하고 있다. 이미지 속 장면을 분석해 대화형으로 정보를 주고받는 방식으로 구글의 AI 모드와 유사한 형태다. 생성된 이미지 속 문장도 보다 자연스럽고 정확하게 표현되며 사용자의 후속 질문에도 유기적으로 대응한다.
퍼플렉시티는 이미지나 PDF를 기반으로 한 문맥 인식 기능을 확대하며 경쟁력을 키우고 있다. 사용자가 이미지를 올리면 관련 정보뿐 아니라 숨겨진 맥락까지 추론해 설명하는 방식의 실험도 병행 중이다.
국내 기업들도 멀티모달 검색 경쟁에 속속 뛰어들고 있다. 네이버는 연내 검색 결과를 요약해 제공하는 'AI 브리핑' 기능을 도입하고 음성과 이미지 기반 검색 기능을 모바일 앱에 탑재할 계획이다. 검색의 접근성과 활용성을 동시에 높이려는 전략이다. 삼성전자는 구글과 협업해 갤럭시 스마트폰에 '서클 투 서치' 기능을 적용했다. 사용자가 화면 속 원하는 영역을 원형으로 감싸면 해당 대상을 인식해 AI가 관련 정보를 제공하는 기능이다. 텍스트는 물론 이미지와 영상 속 대상에도 작동해 별도 입력 없이 검색이 가능하다.
국내 유통업계도 멀티모달 검색 기능을 확대하며 AI 이미지 기반 검색이 실생활에 빠르게 스며들고 있다. 패션 플랫폼 '지그재그'는 이미지 속 의류를 분석해 유사한 상품을 추천하는 '지그재그 렌즈' 기능을 운영 중이다. 사용자는 직접 찍은 옷 사진이나 저장한 스타일 사진을 활용해 원하는 스타일의 상품을 쉽게 찾아볼 수 있다. SSG닷컴은 자체 개발한 AI 이미지 기반 상품 검색 서비스 '쓱렌즈'에 적용해 운영 중이다. 상품 이미지, 브랜드, 이름, 세부 특징 등을 학습한 AI가 유사한 상품을 빠르게 찾아주는 방식이다.
이에 기업들의 멀티모달 확장이 기존 검색의 틀을 흔드는 전환점이 될 수 있다는 평가가 나온다. 텍스트에만 반응하던 AI는 이제 시각적 맥락까지 이해하며 사람의 탐색 방식을 근본부터 바꾸고 있는 것이다. AI 업계 관계자는 "이미지 기반 검색은 단순히 편의성에 그치지 않고 사용자의 맥락까지 파악해 더 개인화된 정보 제공이 가능하다는 점에서 앞으로 AI 검색의 핵심이 될 것"이라며 "검색 방식 자체가 바뀌는 흐름에서 글로벌 기업들의 경쟁은 더 치열해질 수밖에 없다"고 말했다.
유진아기자 gnyu4@dt.co.kr
[ 저작권자 ⓒ디지털타임스, 무단 전재 및 재배포 금지 ]
