온라인 쇼핑몰 스토어팜 상품 분석을 위한 상품 리뷰 크롤링하는 방법

코딩 없이 스토어팜에 있는 상품 리뷰를 크롤링 해오는 방법을 알려드리겠습니다.

네이버 같은 경우 로직이 자주 바뀌지만, 아래 내용을 이해하게 되면, 로직이 바뀌더라도 그대로 적용할 수 있습니다.

크롬 브라우저를 통해서 진행하겠습니다.

1. 데이터 수집을 원하는 상품의 상세페이지로 이동합니다.

2. 오른 쪽 상단의 점 3개를 클릭하여 메뉴를 엽니다.

3. 도구 더 보기 > 개발자 도구를 클릭하면 브라우저의 특정 위치에 개발자 도구가 나타납니다.

4. 화면이 작아서 탭이 다 표시되지 않은 경우 Sources 옆에 화살표를 클릭한 후 Network를 클릭합니다.

5. 클릭해도 아무것도 보이지 않을 수 있습니다. 하단의 탭에서 XHR을 선택한 후 새로고침을 합니다.

6. 페이지가 새로고침 되면서 아래처럼 데이터를 다시 받아오기 시작합니다.

표시된 데이터를 하나 하나 클릭 하면서 안에 포함하고 있는 데이터 중에 자신이 필요한 데이터가 들어 있는 파일을 찾으셔야 됩니다. 이 부분이 가장 중요합니다.

작성한 시점으로는 상품에 대한 리뷰 정보는 page.json?page=1 로 시작하는 파일에 데이터가 담겨 있지만, 파일명이 바뀔 수도 있기 때문에 하나씩 클릭 하시면서 찾으셔야 됩니다.

파일을 찾으실 때 클릭하신 후 Headers 옆에 Preview 버튼을 클릭하면 아래처럼 데이터가 보이실 겁니다. 보라색 글씨 옆의 화살표를 클릭하고, 또 나타나면 화살표를 클릭해서 원하는 데이터가 있는지 확인합니다.

7. 만약 리뷰가 있는데 데이터가 비어있는 경우라면, 리뷰를 클릭하신 다음에 다시 정보를 확인하시면 됩니다.

8. 리뷰를 클릭하면 처음에 받아온 데이터 밑으로 page.json?page=1~ 이라는 데이터가 하나 더 받아진 것을 확인할 수 있습니다. 해당 데이터를 클릭한 후 6번에서 진행했던 방식으로 다시 데이터를 확인 해 봅니다.

전과 다르게 비어있던 content에 데이터가 담겨있는 모습을 확인할 수 있습니다.

서버와 주고받는 상품 리뷰에 대한 정보를 확인하는 방법을 알아봤습니다.

다음 포스팅에서 코딩없이 상품 리뷰를 크롤링 해서 엑셀로 붙이는 방법에 대한 내용에 대해 다루겠습니다.

👇 구매대행 관련 포스팅 👇

투잡으로 시작한 전자책 판매 6월부터 10월까지 5개월 간의 판매 수익 (0)	2020.10.18
온라인 쇼핑몰 스토어팜 상품 분석을 위한 코딩없이 상품 리뷰 가져오는 방법 - 2단계 (10)	2020.10.09
직장인 투잡 쿠팡, 스토어팜 및 전자책 판매 7월 수익 정산 내용 (5)	2020.07.25
[직장인 투잡] 같이 보는 네이버 쇼핑 카테고리 매칭 방법 (0)	2020.07.12
직장인 투잡 일반인의 전자책 판매 후기 및 6월 수익 (3)	2020.07.03