#python #anaconda #jupyter-notebook #visual-code #html #css #javascript #http

제목웹크롤링 관련 질문드립니다2022-05-16 03:40
작성자

웹크롤링을 위해 다음과 같이 코드를 짜고 실행을 했는데 디버깅했을 때 문제가 있다고 뜨지는 않지만 실행창에 아무것도 print되지 않습니다. 주피터 노트북과 비쥬얼 스튜디오 모두 그랬습니다. 감사합니다.

+++다른 url을 넣고 실행하니 전부 잘 돌아갔습니다. 제가 찾아본 바에 의하면 법적으로 문제가 되지 않으면 크롤링은 웬만한 경우 다 가능한 것으로 이해했는데, 혹시 크롤링이 불가능한 경우가 있는 궁금합니다! 감사합니다.

import requests
from bs4 import BeautifulSoup


req = requests.get(url)

html = req.text
soup = BeautifulSoup(req.content, "html.parser")
print(soup)
댓글
이전[re]크롤링 과정중 urlerror 질문드립니다2022-05-17
다음[re]웹크롤링 관련 질문드립니다2022-05-17