현존 최강 파이썬고급 크롤링 부트캠프

나만의 데이터를 수집하려면 어떻게 해야 하나요?

웹에는 다양한 데이터가 있습니다. 필요한 데이터를 직접 모으려면 크롤링 기술을 익히면 됩니다. 다만 웹서비스를 만드는 기술이 다양해, 기본 크롤링만으로는 수집하기 어려운 페이지도 있습니다.

이 강의에서는 Selenium과 Scrapy를 활용합니다. 동적 웹페이지를 다루고, 여러 페이지의 데이터를 수집하는 방법을 실제 문제로 익힙니다.

나만의 분석·예측 경험과 포트폴리오를 만들고 싶어요.

이미 공개된 동일한 데이터로만 연습하다 보면, 다른 데이터를 다뤄보거나 자신만의 포트폴리오를 만들고 싶어집니다. 필요한 데이터를 직접 수집할 수 있다면, 관심 있는 주제를 분석·예측해 보는 경험으로 이어갈 수 있습니다.

데이터 수집 역시 데이터 커리어를 준비하며 익혀야 할 기술입니다. 본 강의에서 수집 기술을 정리하고, 직접 모은 데이터를 분석하는 다음 단계의 기반을 다져보세요.

Selenium과 Scrapy는 어떤 역할을 하나요?

파이썬 입문과 크롤링 기초 부트캠프에서는 파이썬 문법과 bs4 라이브러리를 기반으로 웹페이지의 데이터를 수집합니다. 그런데 동적 웹페이지나 특정 동작 이후에 내용이 표시되는 페이지는 기본 수집 방식만으로 다루기 어렵습니다.

Selenium은 브라우저를 제어하며 동적 페이지를 다루는 도구입니다. 로그인이나 사용자 동작 이후에 표시되는 페이지도 다룰 수 있습니다.

Scrapy는 대량의 데이터를 수집하는 크롤링 프레임워크입니다. 수집 코드를 구조화하고 여러 URL을 처리하는 데 필요한 기능을 제공합니다. 강의에서는 두 도구를 각각 익힌 뒤 함께 활용하는 실습도 진행합니다.

크롤링을 배우며 파이썬·IT 기본기도 다질 수 있나요?

파이썬 기본 문법과 bs4를 활용한 기초 크롤링을 먼저 익히는 것을 권합니다.

기초 강의와 본 강의가 함께 지향하는 것은 파이썬과 IT·데이터 분야의 응용력을 기르는 것입니다. 실제 문제를 해결하려면 다양한 배경지식과 개발 환경을 연결해 써야 합니다.

Scrapy를 다루려면 파이썬 객체지향 문법을 이해하고 터미널과 개발 에디터도 사용할 수 있어야 합니다. Selenium에서는 동적 페이지뿐 아니라 Headless Chrome과 XPATH도 익힙니다. 이런 기술을 크롤링이라는 구체적인 문제 안에서 연결하며 연습합니다.

완전 입문자라면 파이썬 입문과 크롤링 기초 부트캠프부터 시작해 주세요. 기초 과정에 이어 본 과정을 학습하면, 개발 환경 설정부터 데이터 수집 중급 기술까지 차근차근 이어갈 수 있습니다.

기초부터 고급 크롤링까지 어떻게 이어지나요?

기초 과정과 본 과정을 함께 익히면, 웹페이지의 특성에 맞는 수집 방법을 선택하는 데 도움이 됩니다.

• 기본 크롤링 · bs4 — 파이썬 입문과 크롤링 기초 과정에서 익힙니다.
• 동적 페이지 · Selenium — 브라우저 제어, XPATH, 여러 페이지와 이미지 수집을 실습합니다.
• 전문 크롤링 프레임워크 · Scrapy — 프로젝트 구조, 여러 URL 수집과 실전 프로젝트로 이어갑니다.

데이터 분석·과학 커리어에서는 어디에 해당하나요?

파이썬을 익힌 뒤 데이터 수집, 저장, 분석, 예측을 순서대로 경험해 보세요. 서로 연결된 과정을 직접 다뤄보면 데이터를 이해하고 활용하는 기본기를 쌓을 수 있습니다.

본 강의는 그중 데이터 수집 중급 기술을 익히는 단계입니다. 기초 과정에서 배운 파이썬과 크롤링을 활용해 Selenium과 Scrapy로 수집 범위를 넓힙니다.

관련 기술을 단계적으로 익힐 수 있도록 데이터 로드맵도 제공합니다. 본 강의 이후의 학습 순서가 궁금하다면 하단의 데이터 분석·과학 로드맵을 확인해 주세요.