← AI 기술 레이더
업데이트 소식Google Developers Blog

구글, 텍스트·이미지·영상을 함께 검색하는 경량 모델 공개

구글이 EmbeddingGemma 2라는 740M 매개변수 모델을 공개했습니다. 텍스트, 이미지, 비디오, 오디오를 하나의 의미 공간에 배치하여 온디바이스에서 프라이버시를 지키면서 다중 형식 자료를 검색할 수 있습니다.

배경부터 차근차근 살펴보기

검색 기술은 지금까지 주로 텍스트 중심이었습니다. 하지만 현실의 자료는 텍스트뿐만 아니라 이미지, 영상, 음성 등 여러 형식이 섞여 있어서, 한 가지 형식만으로는 관련 자료를 모두 찾기 어렵습니다.

구글이 공개한 EmbeddingGemma 2는 이 문제에 접근하는 새로운 방식입니다. 텍스트, 이미지, 비디오, 오디오를 하나의 의미 공간에 배치하여 형식을 넘나들며 '의미가 가깝다'고 판단되는 자료들을 함께 검색할 수 있습니다.

이 모델의 가장 중요한 특징은 온디바이스 처리라는 점입니다. 클라우드 서버로 자료를 보내지 않고 사용자의 기기 내에서 모든 처리가 일어나므로, 민감한 문서나 개인 정보를 기기 밖으로 내보내지 않으면서도 검색할 수 있습니다.

개발자 관점에서는 MediaPipe Tasks나 LiteRT를 통해 스마트폰, 태블릿, 데스크톱 등 다양한 플랫폼에 통합할 수 있으며, '입력하면서 검색'처럼 매우 빠른 응답이 필요한 경우에도 적합합니다.

연구자, 학생, 기록 관리자, 강의자 같은 사람들이 곧 이런 멀티모달 검색을 경험하게 될 것으로 예상됩니다. 개발자들이 이 모델을 바탕으로 도구를 만들기 시작하면, 자료를 찾는 방식이 지금보다 훨씬 자연스럽고 효율적으로 바뀔 수 있습니다.

구체적으로 무엇이 달라졌나

  1. 01

    다중 형식 검색: 텍스트, 이미지, 비디오, 오디오를 모두 같은 의미 공간에 배치하여 형식을 넘나들며 검색 가능

  2. 02

    온디바이스 처리: 클라우드 서버에 자료를 보내지 않고 사용자 기기 내에서 처리하므로 프라이버시 보호

  3. 03

    경량 모델: 740M 매개변수로 스마트폰이나 임베디드 기기 같은 작은 기기에도 배포 가능

  4. 04

    저지연 응답: 기기 내 처리로 인터넷 왕복 시간이 없어 '입력하면서 검색' 같은 실시간 경험 구현 가능

  5. 05

    교차 플랫폼 통합: MediaPipe Tasks와 LiteRT로 Android, iOS, 웹, PC 등 여러 플랫폼에 동일하게 적용 가능

  6. 06

    제로샷 분류: 학습하지 않은 새로운 의도도 의미 기반으로 자동 분류 가능

누구에게 어떤 의미가 있나

연구자와 학생

논문 작성이나 자료 조사 때 텍스트, 데이터, 영상, 그래프를 한 번에 검색할 수 있게 됩니다. 확인할 점은 온디바이스 환경에서 정확도가 충분한지, 응답 속도가 작업 흐름을 방해하지 않는지입니다.

지식관리 및 기록 담당자

개인 노트, 스크린샷, 팟캐스트 기록, 책 페이지 사진 등 섞여 있는 자료를 의미 기반으로 재발견할 수 있게 됩니다. 확인할 점은 수년간 쌓인 과거 자료를 새 모델로 다시 인덱싱하는 데 걸리는 시간과, 자신의 자료 특성(언어, 도메인)에서의 성능입니다.

강의자와 교육 콘텐츠 제작자

강의 슬라이드, 설명 영상, 참고 이미지, 학생 질문 기록을 섞어 관리하다가 필요할 때 빠르게 찾아 수업에 활용할 수 있습니다. 확인할 점은 기기 내 처리로 학생 개인정보가 보호되는지, 한국어 자료에서의 검색 정확도입니다.

업무 자동화 담당자

기업 문서, 스캔 이미지, 영상 기록을 프라이버시를 지키면서 자동으로 분류하고 검색하는 시스템을 구축할 수 있습니다. 확인할 점은 기업 데이터가 온디바이스에서만 처리되는지, 모델 최적화가 실제로 비용을 절감하는지입니다.

어디에 어떻게 써볼 수 있나

학위 논문 작성 시 다중 형식 자료 검색

논문을 쓸 때 텍스트 논문뿐만 아니라 관련 그래프, 표, 설명 영상, 수치 다이어그램을 모두 동시에 찾아야 합니다. 온디바이스 멀티모달 검색을 사용하면 이 모든 형식을 프라이버시를 지키면서 '의미가 가까운' 것부터 순서대로 볼 수 있습니다.

예를 들면
검색어: '신경망 백프로파게이션의 수학적 근거'. 결과: 텍스트 논문 3개, 수식 설명 영상 2개, 손글씨 수식 이미지 4개, 유튜브 강의 영상 링크 2개가 모두 의미 관련성 순으로 표시됨
확인할 결과
관련 자료 수집 시간 30% 단축, 기존에 놓친 자료 발견 확률 증가, 모든 자료가 개인 기기에만 남아 있으므로 학과 내 논문 자료실의 접근 제약 문제 해결

교육 자료 관리 및 수업 검색

여러 해에 걸쳐 모은 강의 슬라이드, 설명 영상, 사례 이미지, 학생 질문 오디오 기록을 하나의 자료실로 관리합니다. 수업을 준비할 때 특정 주제를 검색하면 모든 형식의 관련 자료가 한 번에 나타나므로 수업 준비를 가속화할 수 있습니다.

예를 들면
검색어: '다문화 교실에서의 갈등 해결'. 결과: 기존 강의노트(텍스트 2개), 설명 영상(3분, 7분), 실제 사례 사진 및 도표(이미지 5개), 학생 질의응답 기록(오디오 3개)이 관련성 순으로 표시됨
확인할 결과
수업 준비 시간 40% 단축, 학생 참여도를 높이는 영상·사례 자료를 우선 활용 가능, 학생 개인정보(이름, 질문 내용)이 기기 내에만 남아 개인정보보호 침해 방지

개인 지식 정리 및 재발견

개인 노트, 책 페이지 사진, 팟캐스트 기록, 블로그 스크린샷, 책갈피 등을 섞어 저장합니다. 나중에 특정 개념을 검색할 때 어떤 형식이든 '의미가 가까운' 기록들을 한꺼번에 볼 수 있으므로, 자신이 이미 알고 있던 지식 사이의 연결고리를 우연히 발견하게 됩니다.

예를 들면
검색어: '의도적 실습과 전문성'. 결과: 자신이 쓴 일기(메모 텍스트), 관련 유튜브 영상의 스크린샷(이미지), 팟캐스트 노트(텍스트), 책의 관련 페이지 사진(이미지), 컨퍼런스 발표 영상(비디오)이 의미 관련성 순으로 정렬됨
확인할 결과
1년 전 놓친 아이디어와 최근 생각이 연결되는 경험, 지식이 이전보다 더 깊어지고 촘촘해지는 감각, 개인 자료가 기기 내에만 있으므로 클라우드 중독으로부터의 자유

처음부터 무리하지 말고, 이 순서로 확인하세요

  1. EmbeddingGemma 2 공식 자료 확인하기

    구글 개발자 블로그 원문과 MediaPipe 공식 가이드를 읽어 모델이 실제로 무엇을 할 수 있고, 무엇을 할 수 없는지 파악합니다. 특히 지원하는 파일 형식, 예상 응답 시간, 메모리와 배터리 요구사항을 구체적으로 확인하세요.

    확인: ✓ 모델 크기(740M)가 자신의 주 기기에서 실행 가능한가? ✓ 지원 파일 형식(이미지는 JPG, PNG? 영상은 MP4만?)이 자신의 자료와 맞는가? ✓ 한국어 문서에 대한 언급이 있는가?

  2. GitHub와 공개 코드랩 샘플 검토하기

    구글과 커뮤니티가 공개한 간단한 예제 코드를 찾아 읽습니다. Python이나 JavaScript 예제 코드를 통해 입력(자료) → 처리(모델) → 출력(임베딩 벡터) 흐름을 이해하고, 반환된 벡터가 어떻게 검색에 쓰이는지 파악하세요.

    확인: ✓ 샘플 코드의 입출력 형식이 명확한가? ✓ 임베딩 벡터를 비교해 유사도를 구하는 방법이 이해되는가? ✓ 자신이 쓰는 프로그래밍 언어용 예제가 있는가?

  3. 작은 규모로 직접 시험하기

    자신의 실제 자료 중 소수를 선택해서(예: 이미지 5~10개, 텍스트 파일 3개, 짧은 영상 1개) 온디바이스 검색을 직접 해 봅니다. 응답 속도가 몇 초인지 측정하고, 반환된 검색 결과가 실제로 의미있게 연결되었는지 판정하고, 기기의 배터리와 온도가 얼마나 영향을 받는지 기록합니다.

    확인: ✓ 응답 속도는 자신의 작업 흐름에 허용 가능한가(예: 3초 이상이면 너무 느린가)? ✓ 검색 결과의 관련성이 만족스러운가, 아니면 많은 무관련 결과가 섞여 있는가? ✓ 5분간의 검색 후 기기 배터리 소비량과 온도 상승이 수용 가능한가?

  4. 지금 사용 중인 검색 방식과 비교하기

    현재 사용 중인 도구(클라우드 기반 검색, 전문 소프트웨어, 수동 폴더 정리 등)와 EmbeddingGemma 2를 기반으로 한 솔루션을 비교합니다. 프라이버시 보호, 응답 속도, 검색 정확도, 기기 자원 소비, 초기 투자 비용 측면에서 각각을 점수 매기고, 자신에게 가장 중요한 기준이 무엇인지 정리하세요.

    확인: ✓ 프라이버시(자료가 기기 내에만 남는 것)가 자신에게 실제로 중요한가? ✓ 속도 개선이 체감되는가? ✓ 정확도가 기존 도구보다 떨어지는 부분이 있다면, 그것이 자신의 업무에 미치는 영향은 얼마나 되는가?

  5. 적용 결정: 도입 또는 보류 선택하기

    위의 네 단계를 거쳐 수집한 정보를 정리해 최종 결정을 내립니다. 도입하기로 했다면, 자신의 전체 자료를 언제까지 옮길지, 기존 도구와 얼마나 오래 병행할지 일정을 세웁니다. 보류하기로 했다면, 어떤 조건(예: 한국어 성능 개선, 상용 도구 출시, 6개월 후 평가)이 맞춰지면 다시 검토할지 기록하세요.

    확인: ✓ 도입/보류 기준(프라이버시, 속도, 정확도, 비용 각각의 가중치)을 명확히 정했는가? ✓ 다음 단계(도구 선택, 자료 이전, 팀원 교육 등)를 구체적으로 계획했는가? ✓ 향후 3~6개월 후 다시 평가할 일정을 캘린더에 기록했는가?

확인된 범위와 아직 모르는 내용을 구분하세요

공식 발표에서 확인된 사실: EmbeddingGemma 2는 740M 매개변수 오픈웨이트 모델이며, 텍스트·이미지·비디오·오디오를 지원하고, MediaPipe Tasks와 LiteRT로 교차 플랫폼 통합이 가능하며, 온디바이스 처리를 지원하고, 저지연 응답과 제로샷 분류를 제공합니다. 아직 공개되지 않은 내용: 한국어를 포함한 다국어 성능 데이터, 의료·법률·과학·교육 등 특정 도메인에서의 정확도, 실제 다양한 스마트폰과 태블릿에서의 응답 시간 측정값, 학술 커뮤니티의 독립적 성능 평가와 비교 분석입니다.

  • 온디바이스 응답 속도의 편차: 기기의 CPU, GPU, NPU 사양과 모델 최적화 수준에 따라 응답 시간이 1~10초까지 크게 달라질 수 있으므로, 자신의 주 기기에서 반드시 직접 측정해야 합니다.
  • 다국어 및 특정 도메인 정확도: 모델이 영어 중심으로 개발·테스트되었을 가능성이 높으므로, 한국어 자료나 의료·법률·과학 같은 특정 분야의 정확도는 별도 평가가 필요합니다.
  • 대규모 자료 인덱싱 비용: 수백만 개의 과거 자료를 새 모델로 다시 임베딩하는 데 필요한 시간, CPU 자원, 전기 비용이 공식 발표에서 언급되지 않았습니다.
  • 라이선스 및 상용화 조건: 모델이 오픈하지만, 자신의 제품이나 서비스에 통합할 때 라이선스 제약(특히 기업용, 상업화 제한 등)이 있는지 확인이 필요합니다.
  • 학계의 독립 벤치마크 부재: 기존 멀티모달 모델(CLIP, 다른 임베딩 모델 등)과의 직접 성능 비교가 공식 자료에 제시되지 않았으므로, 학술 커뮤니티의 평가 결과를 기다려야 합니다.

원문에서 다시 확인하기

이 글은 Google Developers Blog의 공식 발표를 바탕으로 정리했습니다. 기능 범위와 제공 조건은 바뀔 수 있으므로 실제로 적용하기 전에는 원문을 다시 확인해 주세요.

마지막 확인
2026-10-12
다음 검토
2026-11-11

이어 볼 실전 가이드

같은 활용 분야의 소식