#크롤링

스카이스캐너를 빼도 항공권 감시는 안 빨라졌다

Webshare 프록시로는 PerimeterX 차단이 일부만 풀린다고 보고 네이버·구글만 남겼다. 날짜당 약 31초는 그대로다

한 줄로 항공권 감시 스크립트(flight-watch)에서 스카이스캐너를 빼고, 네이버를 기준으로 삼고 구글은 보조로만 보도록 바꿨다(03ab94a). Webshare 프록시를 붙이면 차단이 풀리느냐는 질문에는 일부만 풀린다고 판단했다. 처음에는 실행 시간이 줄어든다고 생각했지만 ...