새로워진 쓱렌즈를 소개합니다!
안녕하세요, AI팀 장혜숙입니다 😃
6월 말 새롭게 선보인 따끈따끈한 쓱렌즈를 셀프 홍보하기 위해 글을 써보려 합니다. 쓱렌즈가 어떻게 얼마나 새로워졌는지 함께 살펴보겠습니다 🧐
‘쓱렌즈’는 무엇인가요?
새로워진 쓱렌즈를 설명하기에 앞서 쓱렌즈를 아직 사용해보지 못하신 분들을 위해 먼저 설명해 보겠습니다.
흔히 이미지검색 기능을 생각하면 구글이나 네이버 앱에서 사진을 찍거나 업로드 해서 동일 이미지를 검색해보는 구글렌즈, 네이버 스마트 렌즈의 경험을 가장 많이 떠올리실 텐데요.
쓱렌즈는 2018년 쓱닷컴에서 커머스에 맞게 쇼핑에 도움이 되는 기능들로 이미지검색 기능을 넣어 만든 렌즈의 이름입니다. 기능으로는 구글, 네이버와 같은 카메라 검색과, 상품 상세 우측 하단 버튼을 통해 유사한 상품들을 바로 찾을 수 있는 스타일 검색으로 나뉘게 됩니다.
쓱렌즈는 이미지를 활용하여 쓱닷컴 내 여러 서비스 영역에 녹아 있습니다. 대표적인 예로 AI Pick에서 최근 본 상품의 유사 상품을 보여주거나, 상품의 속성( eg. #블랙 미니 원피스, #블루 스트라이프 셔츠 등)을 활용한 아이템을 추천하는 영역을 제공하고 있습니다.
최초 오픈 이후, 쓱렌즈는 단순 매장 서비스에서 프로덕트로 자리 잡았는데요! 이번에 기존 매장 서비스 화면과 기능을 재정비하여 New 쓱렌즈로 선보이게 되었습니다.
New 쓱렌즈, 뭐가 달라졌을까?
이미지만 보셔도 한 눈에 들어오는 변화가 있으시죠?
기존보다 깔끔하고 사용성에 중점을 둔 디자인으로 바뀌었습니다.
매장 서비스 개편 전, 방향성과 고객이 원하는 서비스에 대해 자세히 알고 싶어 고객을 대상으로 UXR(User eXperience Research)을 먼저 실시했습니다.
리서치 결과에 따라, 고객 인지를 높일 수 있는 진입점 개선과 편리한 탐색을 위한 기능을 추가하고, 검색결과 퀄리티 향상 작업을 함께 진행하였습니다.
가장 먼저 주요 기능 개선부터 살펴보겠습니다.
1️⃣ 실시간 이미지 박스 편집 기능
: 편집모드로 진입하지 않아도 검색결과 화면 내에서 검색하고자하는 이미지의 영역을 조정하실 수 있습니다.
2️⃣ AI 분석 영역 신규 생성
: 상품 이미지를 분석한 결과를 gpt로 다듬어 고객 친화적인 문구로 제공하고 있습니다.
3️⃣ 배송 및 검색필터 및 정렬기능 추가
: 검색 결과에서 필터와 정렬을 통해 원하는 상품을 찾기 편리해졌습니다.
두번째, [검색어 추가] 기능이 생겼습니다.
AI팀에서는 멀티모달 기술을 계속해서 연구해왔고 해당 기술을 쓱렌즈 매장 개편에 서비스로 적용하였습니다.
따라서 이미지 정보만을 활용해 비슷한 상품을 찾는 것은 물론이고, 텍스트를 추가하여 원하는 상품의 범위를 좁혀가면서도 찾을 수 있게 되었습니다. 아직 해당 기능은 베타버전이지만 점점 검색의 깊이를 깊게 만들 수 있도록 발전하게 될 예정입니다.
세번째, 검색결과가 눈에 띄게 개선되었습니다.
더 비슷한 상품의 유사셋이 노출 될 수 있도록 로직을 추가 하였고, 동일 상품은 하나의 상품유닛에서 깔끔하게 볼 수 있도록 모아보기로 변경했습니다.
새로 추가된 스와이프로 추천을 통해서는 쿼리 이미지 상품과 연관된 브랜드 및 관련 속성을 기준으로 추천하는 영역을 만들게 되었습니다.
쓱렌즈 결과는 어떻게 만드는거죠?
이런 새로움과 나아진 결과를 위해서 많은 기술개발 과정이 있었습니다.
그 과정에 대한 이해를 위해, ‘객체 검출’부터 ‘분류’까지의 개념을 먼저 짚어보겠습니다.
먼저 딥러닝 분야의 하나인 객체 검출(Object Detection)은 이미지 내에 물체를 찾고 객체의 위치와 식별하는 기술 입니다. 이 기술은 사실 다양한 응용분야에서 사용되고 있습니다.
자율주행 자동차의 주변 환경에 있는 객체를 찾아 식별하는 역할에도 쓰이며, AI CCTV를 이용한 범죄 예방이나, 의료 분야에서 암 검출 등에서도 다양하게 쓰이는 기술입니다.
따라서 쓱렌즈에서는 이미지 내에 상품을 찾고 그 상품의 위치와 크기를 박스로 추출하는 역할을 검출기에서 진행하고 있습니다.
이렇게 검출된 이미지를 가지고 다음으로는 ‘분류’라는 작업을 하게 되는데요, 분류(Classification)는 흔히 많이 알고 있는 이미지 속의 개와 고양이가 어느 카테고리인지 구분하여 분류하는 문제입니다.
아래 이미지처럼 정해진 레이블 중 어디에 속하는지를 찾아서 분류하는걸 classification이라고 합니다.
이 개념들을 쓱렌즈에서 빗대어 서비스되는 과정을 설명해 보겠습니다.
상/하의를 같이 입고 있는 아래 이미지의 경우, 검출기가 대표이미지에서 객체를 검출해서 2개의 박스를 찾게 됩니다.
박스로 짤린 이미지를 2개는 분류기를 통해 니트와 팬츠 카테고리로 추론되고, 카테고리 뿐만 아니라 길이나 소재, 패턴과 핏 등 패션에 맞는 추론 속성 라벨을 얻습니다.
이후 전시카테고리를 활용하여 추론 카테고리를 검증하고 썸네일의 순서를 결정합니다. 분류 라벨 결과로 AI분석 영역을 생성하며, 이미지 유사도 결과를 통해 상품 검색 결과를 나열하게 됩니다.
모델 결과만으로 검색 결과가 도출 되진 않고 여러 가지 후처리가 필요하지만 큰 구조적으로는 설명드린 프로세스를 통해서 결과를 만든다고 할 수 있습니다.
이번 매장 개편을 위해 검출기와 분류기 모델 모두 신규 개발하였기 때문에 더 좋은 유사 셋 결과와 약 3배에 달하는 모델 처리 속도까지 개선하게 되었습니다.
유사한 이미지를 찾는 방법과 다르게 [검색어 추가] 기능을 위해서는multimodal 기술이 사용됩니다.
멀티모달 AI는 다양한 모달리티 즉, 여러 유형의 데이터나 정보를 함께 활용하여 인공지능 시스템을 접근하는 방식을 말합니다.주로 텍스트나 이미지, 음성 나아가서는 영상 까지도 활용할 수 있는데 저희는 그 중에서도 언어-비전 멀티모달AI를 활용하였습니다.
쓱렌즈 ‘검색어 추가’와 유사한 서비스로는 구글에서 multisearch 라는 서비스로 먼저 런칭해서 운영하고 있으며, 자연어처리(Natural Language Processing), 컴퓨터 비전(Computer Vision)의 기술을 통합하여 이미지 검색만으로는 원하는 결과를 찾지 못했을 때 텍스트를 추가하여 고객이 원하는 결과에 가까이 도달하게 하고자하는 목적으로 쓱렌즈 매장 서비스에 적용하였습니다.
마음에 드는 모양의 가죽 쇼파를 ‘패브릭’ 소재로 찾고 싶다면 쓱렌즈를 사용해보시는게 어떨까요?
빠르게 아래와 같은 결과를 얻을 수 있습니다.
마치며
자화자찬으로 마무리하며 Google Gemni에게 물었습니다.
쓱렌즈 매장 서비스를 어떻게 생각하는지 효과적으로 사용하는 팁을 알려달라고요 :)
gemini의 꿀팁처럼, 쇼핑의 재미를 주는 서비스이자 텍스트로 표현하기 어려운 상품을 찾고 쇼핑 시간 단축에 큰 도움이 되는 서비스가 되길 바랍니다. 더불어, 검색어 추가로 더욱 능동적으로 원하는 상품을 찾고 자신만의 스타일을 완성해 나가실 사용자가 더욱 많아지길 기대하며 마지막을 정리해보겠습니다.
오픈 이후 한달이 지난 시점에서 모바일 기준 쓱렌즈 매장에 진입하여 상품을 클릭하는 수가 기존 대비 급증하였습니다. 재방문 비율도 지속적으로 증가 추세를 보이고 있으며, UV와 PV 또한 상승세로 우상향 중입니다. 이러한 숫자들로 짐작해볼때 사용자의 쇼핑동선에 도움이되는 역할을 하고 있다는 생각에 뿌듯한 시간을 보내고 있습니다.
‘쓱렌즈’는 매장 개편이 끝이 아니라 앞으로 많은 영역에서 자연스럽게 고객의 쇼핑을 도울 수 있는 컨텐츠를 제공하고, 끊임없는 연구/개발를 위해 노력하겠습니다.
많이~많이 사용해주시고 가끔 응원과 냉철한 피드백도 부탁드립니다. 칭찬에 안주하지 않고 피드백은 수용하며 머물지 않고 발전하는 프로덕트가 되겠습니다.
끝으로 제가 대표로 글을 쓴 이유를 말씀드리자면,
프로젝트를 함께 진행해주신 많은 동료 분들께 감사한 마음을 전하고 싶어서 입니다. 말로 전하기 쑥쓰러워 글을 핑계삼아 감사한 마음 전합니다 💕
함께 프로젝트를 완주 할 수 있어 영광이었고, 좋은 결과가 있어 더욱 감사한 마음입니다.
다음에도 재밌는 프로젝트로 또 만나요 😉
