국내 의류 유통 기업에서 중국의 대표적인 이커머스 사이트인 알리바바와 징둥닷컴에서 판매 중인 한국 제품의 정보를 모니터링 하기 위해 웹 크롤링을 의뢰하셨습니다.
코로나와 한한령으로 인해 중국과의 교류가 전보다 못한 것 아니냐고 생각하는 분들도 계시겠지만, 한국 제품은 중국에서 여전히 인기가 많습니다. 그래서 알리바바와 징둥닷컴 외에도 바이두, 타오바도 등 중국 이커머스 사이트를 수집하고자 하는 의뢰는 계속 들어오고 있습니다.
수많은 이커머스 사이트에서 보다 효율적으로 제품정보를 수집하려면 웹 크롤링 기술을 사용해야 합니다. 중국 등 해외 이커머스 사이트의 경우 해외 접속을 차단하는 경우가 있는데, 이는 기술팀이 적절하게 우회하도록 시스템을 구축하여 이번 프로젝트 또한 성공적으로 수행할 수 있었습니다.
예시로, 위와 같은 이커머스 사이트에서 상품의 카테고리 또는 검색결과를 분석이 가능한 데이터 형태로 수집할 수 있습니다.
예시 파일은 아래 첨부 파일을 다운받아 확인하실 수 있습니다.
해외 이커머스 사이트의 제품 정보를 주기적으로 크롤링 하면,
해당 상품 카테고리의 전반적인 가격정보 분석
자사 제품의 포지셔닝을 파악
자사 신규 제품 가격대 결정
경쟁사 제품의 모니터링
신규 진출 업체 파악 등
온라인 쇼핑과 관련된 업계에서 결정해야 하는 주요 사안들에 필요한 데이터를 손쉽고 정확하게 수집 할 수 있습니다.
스파이더킴은 이번 프로젝트에서
- 해외 사이트 수집 시 발생할 수 있는 기술적 문제들을 해결하고,.
- 해외 사이트를 분석하여 크롤러 개발 후, 단 일주일 만에 지속적인 데이터 수집 및 공급 시스템 납품을 완료할 수 있었습니다.
알리바바, 징둥닷컴 뿐만 아니라 타오바오, 바이두 등 중국 내 쇼핑몰들의 상품 정보 크롤링은 이와 같은 방식으로 진행되고, 중국뿐만 아니라 미국, 일본 등 해외 모든 국가의 정보 수집이 가능합니다.
요즘 그 어느 때 보다도 한국 관련 제품들이 해외에서 관심을 받고 있습니다. 이 제품들의 정보들을 비즈니스에 활용하고자 수행하고 싶은 웹 크롤링 프로젝트가 있으시다면 언제든지 문의를 남겨주시기 바랍니다!
Commentaires