selenium기초

우선 selenium이 뭘하는 건지 일단 알 필요가 있다. selenium은 자동화하는 프레임 웍이라고 이해하면 쉽다. 말 그대로 자동화만을 담당하는 것이다. 수동적으로 html을 하나하나 봐가면서 태그의 속성값들을 찾아서 이걸 가져오는 머 그런 귀찮은 일들을 대신해주는 일들을 담당한다. 왜 굳이? 이렇게? 라고 한다면, 사실 크롤링이 딱히 합법적인 느낌은 아닐 것이다. 내가 어떤 페이지의 주인인데 누가 내 페이지의 데이터를 막 긁어가면 기분이 썩 좋지는 않을 것이다. 그래서 거의 대부분의 사이트들은 이런 걸 막아 놓았는데, 셀레니움으로 하여금 마치 사용자가 보는 것처럼 데이터를 긁어오게 하는 것이다. 물론 같은 아이피로 계속 접근하면 이것도 막히긴 한다 ㅎㅎㅎㅎ "당신은 로봇입니까?" 요런거도 그중에 ..