배꼽 대신 데이터를 팝니다.

오늘은 실제 기업 과제를 진행하면서 홈페이지 데이터를 스크래핑했던 경험을 정리해보려고 한다.과제 자체가 “크롤링”이 주제는 아니었지만, 과제를 수행하려면 회사 홈페이지에 있는 데이터를 수집해야 했다.그래서 필요한 범위 안에서 스크래핑을 진행했다. 이번 작업에서는 Selenium 같은 브라우저 자동화 도구 대신 requests + BeautifulSoup 조합을 사용했다.이유는 간단했다. 사이트를 확인해보니 자바스크립트 렌더링이나 복잡한 사용자 인터랙션 없이도 필요한 정보가 HTML에 그대로 들어 있었기 때문이다.즉, 굳이 무거운 자동화 브라우저를 띄울 필요가 없었다.1. 먼저 홈페이지부터 살펴보기https://leviyonghun.com/ 김용훈 그로스 연구소 그로스해킹 및 마케팅 컨설팅그로스해킹, 그로..