본문 바로가기

python 크롤링

구미 코딩 모임 9회 : 2024년 9월 21일(토) 날짜: 2024년 9월 21일 (토) 10:00 ~ 12:00장소: 구미 미디어센터, 드림큐브 3동참석자: 시원한 외모, 팔고사고, 털실이, 수박주제: Pygame을 이용한 게임 개발 복습 및 크롤링 이해 "게임 개발과 웹 크롤링을 동시에 마스터할 수 있다면 어떨까요?" 이런 흥미로운 생각으로 시작된 구미 코딩 모임 10회는 참가자들의 열정으로 가득 찬 시간이었습니다. 시원한 외모, 팔고사고, 털실이, 수박님이 함께하여 지식과 아이디어를 나누었습니다.HTML 소개 및 구조 이해"웹 페이지의 겉모습 뒤에는 어떤 비밀이 숨겨져 있을까요?" 이 질문을 던지며 우리는 HTML의 세계로 첫 발을 내딛었습니다. 태그와 요소들이 어떻게 조합되어 웹 페이지를 구성하는지, 그 구조를 깊이 있게 탐구했습니다. 이를 통해 .. 더보기
네이버 쇼핑 크롤링: Selenium과 Scrapy를 활용한 쉬운 데이터 수집 방법 네이버 쇼핑 크롤링: 검색 키워드 동적 처리 방법안녕하세요.이전 포스트 Selenium과 Scrapy를 이용해 네이버 쇼핑 크롤링하기에서 네이버 쇼핑몰에서 크롤링을 수행할 수 있는 방법을 간단히 소개해드렸습니다. 예상보다 많은 분들이 해당 글에 관심을 가져주셨고, 피드백을 통해 개선해야 할 점을 알게 되어 감사드립니다.이번 포스트의 목표이번 포스트에서는 검색 키워드를 코드 외부에서 명령어 인자로 받아, 크롤링 대상을 보다 유연하게 지정할 수 있도록 하는 방법을 소개하겠습니다. 이를 통해, 크롤링할 때마다 코드를 수정하지 않고도 원하는 키워드를 입력하여 네이버 쇼핑몰에서 데이터를 추출할 수 있습니다. 예를 들어, 아래와 같이 키워드를 명령어 인자로 전달할 수 있습니다:$ scrapy crawl naver_.. 더보기

반응형