Octoparse에서는 웹사이트 구조에 따라 페이지를 넘어가면서 크롤링하도록 하는 페이지네이션 설정을 해야되는데요. 이러한 페이지네이션 설정이 어려운 사이트가 있습니다. 다음 버튼을 누르면 10페이지씩 이동하거나, 리스트 페이지 자체가 없는 경우가 바로 그런 경우입니다. 이런 웹사이트에서는 어떻게 페이지네이션 설정을 할까요?
수집해야할 URL의 리스트를 만드는 것으로 여러 페이지의 데이터 수집을 간단하게 할 수 있습니다. 아주 유용하게 응용될 수 있는 팁이니 꼭 알아두세요!
#Octoparse #크롤링 #웹사이트크롤링 #자동화 #노코드
