소셜로그인 중단 안내

계정으로 로그인 기능이 2023년 11월 16일 중단되었습니다.

아이보스 계정이 사라지는 것은 절대 아니며, 계정의 이메일 주소를 이용해 로그인 하실 수 있습니다.

▶️ 자세한 공지사항 확인

1,000리터

웹 스크래핑, 크롤링 방법

2021.05.17 15:17

jd77

조회수 1,090

답변 3

채택률

  • 질문
  • 채택
88.9%

안녕하세요,

쇼핑몰을 리뉴얼해서 오픈 준비중입니다.

본사의 많은 제품들의 상세 정보를 가져와야해서,

본사 홈페이지(쇼핑몰)에서 제품 정보를 스크랩핑, 크롤링하여 엑셀로 형성하는 방법을

고민하게 되었습니다.

단순히 구글 스프레드시트에서 import 함수 한줄로 가져오기에는

테이블 정보다 보니 가로로 정보를 변경하기가 애매하고,

수천개의 제품 상세 정보를 가져오는 것이 어려워보였습니다.

(페이지 뎁스가 깊고, 제품 리스트에서 드롭다운 버튼을 눌러야 상세 페이지로 들어가는

링크 버튼이 나옵니다)


질문1.

스크래핑하여 제품 정보를 엑셀로 만들려면 스크래핑 프로그램을 구매하는 것이 좋은가요

아니면 스크래핑 업체를 찾아서 맡기는 것이 좋을까요?


질문2.

추천하실만한 스크래핑 프로그램, 업체가 있다면 추천부탁드립니다.(유,무료-무료면 더 좋습니다ㅜㅜ)

자꾸 크몽 위주로만 나와서..전문 업체나 프로그램을 찾는게 쉽지가 않네요.

본사 홈페이지가(외국쇼핑몰) 구조가 매끄럽지 않아서 제대로 스크랩핑이 되는지 고민도 되구요.

(우선 사이트맵을 찾을수가 없습니다...)


제가 혼자서 web Scraper를 사용해봤는데, 다른 쇼핑몰은 어느정도 되는데

본사 홈페이지는 링크가 복잡해서 그런지 no data라고만 뜨더라구요.

(제가..설정을 잘못했을수도 있는데, 어디가 틀렸는지 알수가 없더라구요)


고수님들의 조언을 얻고자 합니다.

소박한 리터 걸고 갑니당 ㅜㅜ

데이터스크래핑 크롤링 웹스크래핑

스크랩

공유하기

신고

목록글쓰기
답변 3
댓글 새로고침
로그인 후 더욱 많은 기능을 이용하세요!아이보스 로그인