본문 바로가기

웹크롤링

물개발자 경험을 나누다 13년 개발 경험으로 진행 중인 내용입니다. 여러분의 성장을 응원합니다. githubhttps://github.com/harry81kmonghttps://kmong.com/@%ED%98%84%EB%AF%BClinkedinhttps://linkedin.com/in/chharry 초급ChatGPT 이해와 활용목표: ChatGPT의 기본 개념을 이해하고 실생활 및 업무에 활용하는 방법을 배운다.내용:ChatGPT의 작동 원리ChatGPT의 다양한 활용 사례효과적인 질문 및 답변 실습사용 시 주의사항 AI에게 그림 그리기, Stable Diffusion 설치와 활용, Upscaler목표: AI를 이용한 이미지 생성 및 향상 방법을 익힌다.내용:AI 그림 그리기: AI의 기본 개념과 그림 생성 알고리즘 이해Sta.. 더보기
Selenium과 Scrapy를 이용해 네이버 쇼핑 크롤링하기 안녕하세요, 여러분! 오늘은 프로그래밍과 데이터 수집에 관심 있는 분들을 위해 흥미롭고 유익한 주제를 가져왔습니다. 바로 Selenium과 Scrapy를 이용해 네이버 쇼핑에서 제품명을 크롤링하는 방법을 소개해드리려고 합니다. 이 글을 통해 웹 크롤링의 기초부터 고급 기술까지 배우실 수 있을 거예요.왜 Selenium과 Scrapy를 함께 사용할까요?웹 크롤링을 할 때, 종종 동적으로 로드되는 콘텐츠를 마주하게 됩니다. 이러한 동적 콘텐츠는 일반적인 HTML 파싱으로는 접근하기 어려운데, 이때 Selenium이 큰 도움이 됩니다. Selenium은 실제 브라우저를 제어하여 JavaScript로 렌더링된 콘텐츠를 포함한 모든 페이지 요소에 접근할 수 있게 해줍니다. 반면 Scrapy는 빠르고 효율적인 크롤.. 더보기

반응형