데이터를 활용하여 온라인 쇼핑몰 사기를 감지, 방지, 예방
3PM Solutions에 대하여
3PM Solutions는 Amazon, eBay, Walmart.com 같은 온라인 쇼핑 웹사이트를 주고객으로 하는 전자상거래 브랜드 분석 및 보호 회사입니다. 3PM Solutions의 클라우드 기반 플랫폼은 제조업체, 소매업체, 유명 브랜드 제조업체가 수익에 영향을 미치는 복잡한 문제를 해결할 수 있는 솔루션 역할을 합니다. 이 회사의 독창적인 B2B2C Chrome 확장 모듈인 ReconBob은 소비자의 온라인 쇼핑 환경을 개선하고 보호합니다.
어떤 어려움을 겪고 계신지 알려주세요. Google Cloud가 도와드리겠습니다.
문의하기3PM Solutions는 Cloud Bigtable 및 Dataproc 같은 Google Cloud Platform 서비스를 활용하여 세계적인 유명 브랜드 제조업체들이 Amazon, eBay, Walmart.com에서 발생하는 수익을 관리, 보호, 증대할 수 있도록 지원하고 있습니다.
Google Cloud 도입 효과
- 인프라 점검 시간이 주당 5시간에서 0시간으로 감소
- 200만 개 이상의 판매업체에 대한 1억 6,000만 건의 고객 리뷰를 4시간 이내에 분석
- 1년 만에 600% 증가한 신규 고객을 인력 충원 없이 수용
- 10억 개 이상의 항목에서 모든 관련 브랜드 데이터를 수초 만에 검색
며칠이 아니라 몇 분만에 신규 고객 수용
Statista에 따르면 Amazon에서 판매된 품목의 52%가 써드파티 리셀러의 품목인 것으로 나타났습니다. 이 비중은 지난 5년간 조금씩 늘어났죠. 리셀러의 대부분은 진품을 판매하지만 순진한 소비자를 상대로 위조 제품 또는 과장 광고 제품을 판매하는 리셀러도 적지 않습니다.
연방 수사관들이 이와 같은 행위를 주시하기 시작했습니다. 최근 CBS News는 수사관들이 Amazon, Walmart.com, eBay 및 기타 온라인 쇼핑몰에서 리셀러 판매 제품 47종을 구입했는데 그 중 화장품, 신발, 전자 제품을 비롯한 20가지 제품이 가짜로 판명됐다고 보도했습니다. 47종의 제품 모두 신상품이라고 광고되었던 제품으로, 가짜 제품을 판매한 리셀러들은 고객으로부터 90점 이상의 평점을 받았습니다.
판매업체에 대한 소홀한 감시가 마켓플레이스 사업의 성장을 돕고 있다고 해도 과언이 아닙니다. 그러나 리셀러가 아무런 규제 없이 소비자와 직접 소통할 수 있게 되면서 마켓플레이스는 소비자와 기업 모두에게 엄청난 잠재적 문제를 야기했습니다. 진품처럼 보이지만 수준 이하이거나 심지어 유해한 브랜드 제품을 받은 소비자는 등을 돌리기 마련입니다. 위조 제품 또는 과장 광고 제품은 제조업체, 소매업체, 기타 회사의 브랜드 평판을 저해하고 수백만 달러의 매출 손실을 초래할 수 있습니다.
온라인 쇼핑 사이트는 문제를 근절하겠다고 약속했고, 심지어는 기업이 자사의 브랜드를 등록할 수 있는 공간을 따로 마련하는 웹사이트도 등장했습니다. 그러나 3PM Solutions의 사장이자 창립자인 롭 던켈(Rob Dunkel)은 "마켓플레이스 운영업체가 기업의 브랜드 수익을 보호해줄 것이라고 믿는 것은 고양이에게 생선을 맡기는 격"이라고 비판합니다. 따라서 이와 같은 잘못된 관행을 효과적으로 바로잡을 방법을 고민해야 합니다.
3PM Solutions는 Google Cloud Platform(GCP) 서비스를 활용하여 실효성 있는 데이터 분석 솔루션을 개발하는 데 앞장서고 있습니다.
3PM Solutions는 Amazon, eBay, Walmart.com에서 리셀러와 관련된 대량의 비정형 데이터를 취합, 정리, 분석할 수 있는 클라우드 기반의 소프트웨어 플랫폼을 개발했습니다. 목표는 세계적인 유명 브랜드 제조업체를 비롯한 자사 고객에게 위조품 판매, 암시장 제품 또는 과장 광고 제품을 판매하는 리셀러에 대한 투명하고 실용적인 통찰력을 지원하는 것입니다. 또한 3PM Solutions는 소비자가 Amazon의 리셀러를 더욱 정확하게 파악할 수 있는 ReconBob라는 무료 Chrome 브라우저 확장 모듈을 개발했습니다.
3PM Solutions의 사명은 유명 브랜드 제조업체가 온라인 쇼핑 웹사이트에서 자사 제품에 대한 통제력을 유지할 수 있도록 지원하는 것인데, 이런 목적을 달성하려면 대량의 비정형 데이터 세트를 분석할 수 있어야 합니다. 처음에 3PM Solutions는 Hadoop 기반의 Hbase 클러스터로 대량의 데이터 세트를 처리하고 분석하는 호스트형 클라우드 환경을 구축했습니다. 그러나 엔지니어링 팀이 Hadoop 클러스터를 수동으로 구현하고 관리하는 데 너무 많은 시간이 소요되는 단점이 나타났습니다.
"기존 인프라에서는 Hadoop 클러스터를 구현하는 데 3주 가량 걸렸고 운영/관리하는데 일주일에 5시간씩 허비해야 했습니다. 그런데 Cloud Bigtable를 도입하고 나서는 단 몇 분이면 구현을 완료할 수 있게 되었을 뿐 아니라 스스로 돌아가므로 아예 점검할 필요가 없어졌습니다."
—세르게이 벨로프(Sergey Belov), 3PM Solutions 기술 담당 이사점검 시간이 획기적으로 감소한다는 점에 고무된 3PM Solutions는 GCP로 인프라를 이전해 Google Cloud Bigtable을 완전관리형 NoSQL 데이터베이스 서비스로 사용하게 되었습니다. 3PM Solutions의 데이터사이언스 담당 이사 셰인 지오토(Shane Ghiotto)는 GCP에 대한 지식이 전혀 없는 상태로 팀에 합류했지만 Cloud Bigtable용 Python 클라이언트의쉬운 API 덕분에 불과 하루 만에 데이터를 효율적으로 읽고 Cloud Bigtable에 기록하는 법을 익힐 수 있었습니다. Cloud Bigtable이 효과적으로 데이터를 수집하므로 셰인은 분석에 집중할 수 있습니다.
기존의 HBase 클러스터가 Cloud Bigtable API와 호환되기 때문에 3PM Solutions는 대대적인 수정이나 번거로운 작업을 거치지 않고도 모든 데이터를 마이그레이션할 수 있었습니다.
3PM Solutions의 기술 담당 이사 세르게이 벨로프에 따르면 "기존 인프라에서는 Hadoop 클러스터를 구현하는 데 3주 가량 걸렸고 관리/운영하는데 일주일에 5시간씩 허비해야 했습니다. 그런데 Cloud Bigtable를 도입하고 나서는 단 몇 분이면 구현을 완료할 수 있게 되었을 뿐 아니라 스스로 돌아가므로 아예 점검할 필요가 없어졌습니다."
3PM Solutions는 당시 베타 테스트 중이던 Cloud Bigtable을 사용하기 시작했고 그 덕분에 데이터 테이블을 구조화할 수 있었습니다. "하루에 약 10억 개의 데이터 포인트를 저장하고 있는데, Cloud Bigtable의 속도와 안정성 덕분에 향후 6개월간 데이터 포인트 수를 4~5배 늘릴 수 있을 것으로 보인다"고 세르게이는 설명합니다.
사기 적발 및 근절
최근 조사에 따르면 Amazon.com에서 판매된 제품은 약 5억 6,200만 개에 달합니다. 제품은 굉장히 다양한 카테고리로 분류되는데, 각 카테고리에는 제품을 설명하는 서로 다른 핵심 속성이 존재합니다. 3PM Solutions는 Amazon, eBay, Walmart.com의 모든 데이터를 취합합니다. 따라서 3PM Solutions의 소프트웨어는 온라인 쇼핑 웹사이트 운영업체가 상황을 정확히 파악하는데 유용할 뿐 아니라 무엇보다 위조 또는 불법 제품과 판매업체를 배제하는 데 유용합니다.
예를 들어, 3PM Solutions는 데이터를 취합하여 분석한 결과를 바탕으로 판매 이력 데이터베이스를 구축해 사기를 간파하는 데 도움이 주고 있습니다. 3PM Solutions의 소프트웨어는 판매업체의 판매 이력, 고객 리뷰, 기타 데이터를 취합한 뒤 이를 토대로 위조 또는 불법 제품 판매업체를 적발하고 온라인 쇼핑몰에 이를 고지해 해당 판매업체를 퇴출시키도록 만들 수 있습니다.
롭에 따르면 "3PM Solutions가 리셀러의 위험도 프로파일을 제공하므로 온라인 쇼핑몰은 리셀러의 신원, 리셀러가 판매하는 제품 및 지식 자산에 관한 정보, 해당 리셀러의 제품을 구매한 고객의 만족도를 파악할 수 있습니다. 고객이 위조 브랜드 제품 때문에 불만을 갖게 될 경우 해당 브랜드는 고객을 잃을 수 있지만 온라인 쇼핑몰은 타격을 입지 않을 수도 있습니다."
"3PM Solutions는 자체 개발한 피드백 분류 방식과 함께 Google Compute Engine 및 Cloud Dataproc을 활용하였습니다. 그 덕분에 200만 개 이상의 판매업체에 대한 1억 6,000만 건 이상의 고객 리뷰를 4시간 이내에 분석하는 놀라운 성과를 거두고 있습니다."
—셰인 지오토, 3PM Solutions 데이터 과학 담당 이사수백만 건의 고객 의견 분석
셰인에 따르면 "3PM Solutions가 수집한 데이터는 자연스러운 구조가 아니라 이해하기 어렵습니다. 큰 덩어리로 된 텍스트 데이터를 집계하기 때문에 고객이 각 제품에 대해 어떤 카테고리 속성을 가장 중요하게 생각하는지 파악해야 합니다."라고 합니다.
3PM Solutions는 필요에 따라 Google Compute Engine에 가상 머신 클러스터를 구축하고 Cloud Dataproc을 사용하여 목록 테이블을 색인화합니다. 그래야 비정형 텍스트 데이터를 쉽게 검색할 수 있기 때문입니다. 고객이 리셀러의 판매 제품에 대해 온라인 쇼핑 웹사이트에 남긴 리뷰도 가져와서 다양한 카테고리로 분류합니다. 과거 중고 제품을 신제품으로 속여서 판매하거나 위조품 또는 유효기간이 지난 제품을 판매한 전력이 있는 경우 카테고리에 이 정보가 표시됩니다.
셰인에 따르면 3PM Solutions는 자체 개발한 피드백 분류 방식과 함께 Google Compute Engine 및 Cloud Dataproc을 활용하고 있습니다. 그 덕분에 200만 개 이상의 판매업체에 대한 1억 6,000만 건 이상의 고객 리뷰를 4시간 이내에 분석하는 놀라운 성과를 거두고 있습니다.
이미지 대조를 통해 브랜드 보호
3PM Solutions는 Cloud Vision API 를 사용하여 리셀러가 게시한 이미지를 유명 브랜드 제조업체의 지식 자산으로 보호 받는 이미지와 대조합니다. 이미지가 일치할 경우 3PM Solutions는 이미지의 도용 사실을 온라인 쇼핑몰에 알릴 수 있습니다. 이미지 무단 도용 사례를 적발해야 하는 이유는 일부 리셀러가 소비자를 기만할 목적으로 진품 이미지을 복제하여 남용하기 때문입니다.
3PM Solutions는 Google이 개발한 오픈 소스 머신 러닝 프레임워크인 TensorFlow와 TensorFlow용 Google 머신 러닝 가속기인 Cloud TPU를 통합하여 이미지 인식률을 높일 계획입니다. TensorFlow로 구현한 딥 러닝 모델을 통해 3PM Solutions는 소비자가 Amazon에서 유명 브랜드 제조업체의 승인을 받은 판매업체로부터 제품을 구매하도록 유도하거나, 할인 쿠폰을 제공하여 유명 브랜드 제조업체의 승인을 받은 온라인 쇼핑 웹사이트를 이용하도록 유도할 수 있습니다.
단 몇 초면 확장 완료
3PM Solutions의 솔루션에 대한 수요가 급증하고 있습니다. 2017 회계연도에 3PM Solutions의 신규 고객은 600% 증가했고 2018년에도 6월을 기준으로 전년 대비 50% 증가했습니다. 롭에 따르면 "GCP는 별도로 관리할 필요가 없기 때문에 늘어난 고객을 인력 충원 없이도 너끈히 수용할 수 있습니다."
“Google Cloud Platform으로 이전하기 전만 해도 늘어난 고객 수만큼 인프라를 확장하는 데 하루나 이틀이 걸렸는데, 이제는 Google Compute Engine과 Cloud Dataproc 덕분에 몇 분이면 모든 관련 데이터를 취합하여 유용한 형식으로 정리할 수 있습니다."
—셰인 지오토, 3PM Solutions 데이터 과학 담당 이사또한 3PM Solutions는 GCP를 사용하여 신규 고객을 즉석에서 추가할 수 있습니다. 셰인은 말했습니다. "Google Cloud Platform으로 이전하기 전만 해도 늘어난 고객 수만큼 인프라를 확장하는 데 하루나 이틀이 걸렸는데, 이제는 Google Compute Engine과 Cloud Dataproc 덕분에 몇 분이면 모든 관련 데이터를 취합하여 유용한 형식으로 정리할 수 있습니다."
3PM Solutions는 늘어난 고객과 서비스에 맞춰 인프라를 신속하게 확장할 수 있어야 합니다. 3PM Solutions는 App Engine을 활용해 서버리스 환경에서 애플리케이션을 확장하는 한편, Google Kubernetes Engine을 사용해 클라우드 리소스 및 작업을 자동으로 관리하고 있습니다.
App Engine을 ReconBob용 백엔드로 사용한 덕분에 3PM Solutions는 시스템을 확장하여 수천만 명의 사용자를 즉시 수용할 수 있게 되었습니다. 또한 App Engine 덕분에 3PM Solutions는 소비자가 Amazon.com에서 안전하게 쇼핑을 즐길 수 있는 여건을 조성하는 데 집중할 수 있습니다. 3PM Solutions 시스템의 심장이나 다름없는 Cloud Bigtable은 확장하기가 대단히 용이합니다. 세르게이에 따르면 "특정 고객의 Cloud Bigtable 클러스터 노드를 3개에서 최대 20개까지 자동으로 확장하고 향후에 필요한 수만큼 바로 줄일 수 있습니다."
불안감 해소
보안 기능 및 제어가 GCP에 통합되어 있으므로 3PM Solutions 엔지니어들은 마음 놓고 다른 중요한 작업에 집중할 수 있습니다. 세르게이에 따르면 "GCP의 보안이 철저하기 때문에 보안에 신경 쓰느라 시간을 낭비하지 않아도 됩니다."
파트너 관계 구축
3PM Solutions가 Google로부터 받는 지원은 "완벽"하다고 롭은 강조합니다. "Google 엔지니어들이 3PM Solutions 팀과 함께 정기적으로 점검하고, 궁금한 사항이 있을 경우 적절한 해답을 가지고 있는 사람에게 연결합니다. Google과의 관계야말로 진정한 팀워크라고 생각합니다."
Google의 기술지원과 최소한의 점검만 요하는 GCP에 Google이 제공하는 첨단 기술이 더해지면서 3PM Solutions의 엔지니어들은 미래를 위해 투자할 수 있는 여건이 마련됐습니다.
롭은 말했습니다. "관리 작업에 시간을 허비할 필요가 없기 때문에 자연어 처리 및 머신 러닝 같은 Google 서비스로 기능을 솔루션을 고도화하는 시간적 여유도 생겼습니다. 3PM Solutions는 GCP를 무기 삼아 경쟁사와 정면으로 맞서는 한편 강력한 솔루션을 꾸준히 개발하여 선보임으로써 결국 시장에서 승리하고 있습니다."
어떤 어려움을 겪고 계신지 알려주세요. Google Cloud가 도와드리겠습니다.
문의하기
3PM Solutions에 대하여
3PM Solutions는 Amazon, eBay, Walmart.com 같은 온라인 쇼핑 웹사이트를 주고객으로 하는 전자상거래 브랜드 분석 및 보호 회사입니다. 3PM Solutions의 클라우드 기반 플랫폼은 제조업체, 소매업체, 유명 브랜드 제조업체가 수익에 영향을 미치는 복잡한 문제를 해결할 수 있는 솔루션 역할을 합니다. 이 회사의 독창적인 B2B2C Chrome 확장 모듈인 ReconBob은 소비자의 온라인 쇼핑 환경을 개선하고 보호합니다.