[정보] 크롤링 주의사항

 

세션을 물어서 통신하도록 하자

세션없이 진행 시 연결을 맺고 끊음의 발생으로 서버에서 수용가능한 버퍼가 없어서 연결이 끊어지거나

보안장비에서 공격으로 인식해서 차단 될 수 있다.

session = requests.Session()

session.get("URL")

session.close()