메인 콘텐츠로 건너뛰기
IP 프록시 설정
nicole avatar
작성자: nicole
최소 11달 전에 업데이트됨

아래 문제가 발생하면 Octoparse에서 IP 프록시를 수동으로 설정해 볼 수 있습니다.

  • 회사 또는 기관에서 인트라넷을 사용하고 외부 요청제한하기 때문에 Octoparse에 로그인할 수 없습니다.

  • 대상 웹사이트가 웹 스크래핑매우 민감할 때 스크래핑 활동을 중단하기 위해 IP 차단과 같은 스크래핑 방지 전략을 사용합니다.

이 튜토리얼에서는 위에서 언급한 문제를 해결하기 위해 프록시를 설정하는 방법을 보여드리겠습니다.


1. 프록시를 사용하여 Octoparse 로그인(로그인 전용)

회사가 외부 요청을 제한하는 사용자를 위해 설계되었습니다. 로그인 인터페이스의 프록시 설정은 로그인 프로세스 중에만 적용되며 작업 편집 또는 스크래핑에는 적용되지 않습니다.

  • 로그인 인터페이스의 설정으로 이동합니다.

  • 수동 프록시 설정을 선택하고 IP 주소포트를 입력합니다.

  • 연결테스트하여 연결이 양호한지 확인한 다음 설정을 확인할 수 있습니다.


2. 외부 프록시 서버를 변환하여 IP 차단에 대응

Octoparse Cloud IP는 데이터 센터 IP이므로 웹으로부터 차단될 수 있습니다. 웹 사이트에서 IP 또는 클라우드를 차단하는 경우 작업 설정에서 IP 프록시를 설정할 수 있습니다. 자체 IP 프록시를 사용하거나 Octoparse 내장 프록시를 사용할 수 있습니다.

프록시 설정은 작업이 실행될 때만 적용되고 작업을 편집할 때는 적용되지 않습니다.

2.1 Octoparse 내장 프록시 설정(로컬 및 클라우드용)

Octoparse 프록시는 주거용 IP이므로 차단을 피하는 데 더 효과적입니다.

  • 프록시를 설정할 작업을 엽니다.

  • 작업 설정으로 이동 > 차단 방지

  • 프록시를 통해 웹 사이트 접속 선택합니다.

  • Octoparse 프록시 사용을 클릭합니다.

  • IP 주소에 대해 원하는 기본값 또는 국가/지역 선택합니다.(기본값은 임의 국가의 IP를 사용하는 것을 의미함)

  • 변환 간격에 대한 변환 시간 선택

  • 인터페이스의 왼쪽 상단 모서리에 있는 저장 버튼을 클릭하여 설정을 저장합니다.

IP.png

참고:

  • Octoparse 내장 프록시는 작업을 생성할 때(버전 8.6.8부터) 작동할 수도 있습니다.

  • Octoparse 프록시의 가격은 1GB당 3달러입니다. 이 기능을 사용하려면 먼저 충분한 프록시 크레딧 또는 계정 크레딧이 있는지 확인해야 합니다. IP 프록시를 활성화하려면 계정 크레딧에 $3 이상이 있어야 합니다. 페이지에 표시된 계정 크레딧은 프록시 구매에 사용할 수 있습니다. 크레딧 추가 버튼을 클릭하여 크레딧을 충전할 수 있습니다.

  • 프록시 사용량은 페이지 로드 트래픽을 기준으로 합니다.

  • 1GB 프록시는 일반적으로 500개의 웹 페이지를 긁어낼 수 있습니다. 프록시가 일부 웹 페이지에서 작동하지 않을 수 있습니다. 먼저 테스트 하기 위해 소분의 크레딧을 추가할 수 있습니다.

  • 프록시 크레딧은 환불할 수 없습니다.

2.2 자체 IP 프록시 사용(로컬 전용)

IP 프록시를 설정하는 또 다른 방법은 Octoparse에 본인의 IP에 액세스하는 것입니다. 자체 IP 프록시는 로컬 실행에서만 적용할 수 있습니다.

  • 나의 프록시 사용 선택합니다.

  • 설정을 클릭합니다.

  • 본인의 IP 프록시 입력합니다.

  • 설정 확인

참고: Octoparse는 HTTP 프록시만 지원할 수 있습니다. 프록시 서버의 IP 주소와 포트 번호를 : (예: 58.22.214.29:2318)으로 구분하십시오.

답변이 도움되었나요?