음식 사진 한 장으로 내가 딱 원하던 맛집을 찾는 AI, 어떻게 만들었을까

핵심 내용

• 음식 사진을 입력하면 주변에서 비슷한 메뉴를 파는 맛집을 찾아주는 AI 검색 시스템 소개
• CLIP으로 음식 이미지를 임베딩하고, FAISS로 유사도 검색을 수행하는 구조
• 위치 기반 반경 제한과 음식 카테고리 필터링으로 추천 정확도 보완

문제 상황

• 이미지 유사도만으로는 다른 음식이 섞여 나오는 오탐 발생
• 지역과 무관한 식당이 추천되는 문제

해결 방법

• 사전 임베딩과 FAISS 인덱스로 대규모 이미지 검색 효율화
• KDTree 기반 위치 필터링으로 반경 내 식당만 후보화
• Top-1 카테고리 기준 재검색으로 음식 종류 혼선 완화

적용해볼 점

• 음식/비음식 이미지 사전 필터링 강화
• 조리 방식, 식감, 소스 특징까지 반영한 더 정교한 임베딩 확장