리스틀리 프록시를 써도 connection error가 뜹니다. 차단 당한 것 같은데 어떡할까요?
connection error 가 발생하는 주된 이유는, 리스틀리 서버가 추출을 원하는 웹사이트로부터 차단당했기 때문입니다. 몇 시간 후에 다시 시도한다면 성공할 수도 있지만, 며칠이나 몇 주 동안 계속해서 차단 상태가 유지될 수도 있어요. 특정 ip 주소가 얼마동안이나 차단되는지는, 웹사이트 정책에 따라 다릅니다.
아마 connection error를 겪고 계셨다면 그 후 유료 사용자에게 기본적으로 주어지는 프록시 서버를 사용하셨을텐데요.
문제는 이러한 프록시 서버를 써도 차단을 당했을 때입니다. 기본 제공 프록시서버는, 여러분 뿐만 아니라 다른 여러 유료 사용자가 함께 쓰는 공용프록시이기에 발생하는 문제이죠.
여러분이 해당 프록시를 쓰지 않았더라도, 다른 사용자가 이 프록시서버를 사용해서 여러분이 원하는 웹사이트를 추출하려다가 차단을 당할 수 있습니다. 따라서 다른 사용자와 프록시 서버를 공유함으로 인한 리스크를 없애기 위해서는 전용 프록시 서버를 사용하는 편이 좋습니다.
전용 프록시는 따로 구매를 요청하신 사용자만 독점적으로 사용 가능하므로, 다른 사용자로 인한 차단 걱정 없이 안정적인 서버 설정이 가능합니다.
또한, 리스틀리가 기본적으로 제공하는 프록시 국가 외의 다른 나라 프록시가 필요한 경우에도 개인 프록시를 사용하는 것이 좋습니다. (동유럽/중동/남미/오세아니아 국가 등)
만약 단독으로만 프록시를 사용하고 싶으시다면 hello@listly.io로 프록시 구매 문의 이메일을 보내셔도 좋습니다.
혹은 데이터보드에 들어가신 뒤, 설정 -> 나의 프록시 -> 개인프록시 요청하기를 눌러 문의를 주실 수 있습니다. 따로 원하시는 프록시 서버 국가 명을 말씀해주지 않는다면 미국으로 10개의 프록시서버가 배정됩니다.
하지만 단독프록시를 사용하더라도, 지속적으로 많은 양의 데이터를 빠르게 수집하다보면 차단당할 확률이 존재합니다.
이 경우, 추가금액 없이 1회에 한해 타사 프록시로 변경해드리거나 다른 프록시 서버를 구매하여설정해드립니다.