BeautifulSoup 썸네일형 리스트형 [python] 무신사 상품 리뷰 크롤링1. 상품 url/제목/가격 가져오기 (BeautifulSoup, 정규표현식) 오늘은 백만년만에 블로그 포스팅을 해보려한다.. 무신사 상품 리뷰 크롤링은 이번년도 상반기에 비저블 활동을 하면서 마지막 조별 과제에서 하게되었다! (이게 벌써 반년이 다 되어가다니) 물론 결과적으로 주제가 바뀌어 크롤링 결과는 쓸모가 없게 되었지만..그래도 녹슬은 크롤링 감을 되돌리는데 좋은 기회가 되었다. 취직 이후 아예 이쪽 공부는 손을 놓아버리고 회사에 적응하느라 급급했었는데 (사실 아직도 적응 못함😅) 이번 포스팅을 시작으로 다시 새로운 맘으로 공부해보려고한다!!! 서론이 너무 길었네..바로 시작!! 일단 우리 조의 주제는 "무신사 스탠다드" 상품의 리뷰 분석이었다. 다들 알다시피 "무신사 스탠다드" 상품은 매우 많기에 상품의 리뷰를 긁어오기 위해서는 1) 각 상품의 제목과 url을 먼저 긁어온.. 더보기 [python] 멜론차트 크롤링 ( Selenium, BeautifulSoup ) 오늘은 저번 포스팅에 이어 크롤링을 해볼것이다! 이번에는 BeautifulSoup뿐만 아니라 Selenium을 같이 활용할 것이다 Selenium을 사용해야 하는 이유? 셀레니움은 웹을 자동으로 동작시키는 역할을 한다. 즉, 우리가 마우스로 하는 일들(검색창 누르기, 필터 설정하기, 스크롤 내리기 등등)을 코딩을 통해 자동으로 해준다는 뜻이다. 그렇다면 마우스로 직접 설정하면 되는 것을 왜 굳이 셀레니움을 이용해서 자동으로 해야할까? 우리 눈에 보이는 url이 변하지 않기 때문이다!! 저번 BeautifulSoup만을 사용해 크롤링해왔던 네이버 뉴스의 url을 살펴보겠다. search.naver.com/search.naver where=news&query=%EC%95%84%EB%8F%99%ED%95%99.. 더보기 이전 1 다음
