반응형 분류 전체보기462 [파이썬3]urllib.parse 모듈 사용하기 #urllib.parse.quote_plus 사용 안함 import urllib.parse def input_query() : q = str(input("검색어를 입력하세요: "))return "&query=" + q input_query() #urllib.parse.quote_plus 사용 import urllib.parse def input_query() :q = urllib.parse.quote_plus(str(input("검색어를 입력하세요: ")))return "&query=" + q input_query() 2017. 1. 10. [파이썬3] urllib.request 불러오기 #urllib.request 모듈 불러오기 import urllib.request #웹문서 불러오기 import urllib.request req = urllib.requestreq.urlopen("http://naver.com") #웹페이지 불러오기 #웹서버 정보 받아오기 import urllib.request req = urllib.requestreq.urlopen("http://naver.com") #웹페이지 불러오기d = req.urlopen("http://naver.com")status = d.getheaders() for s in status : print(s) #웹페이지 상태 확인 d = req.urlopen("http://naver.com")d.status #웹페이지 데이터 읽기 d = r.. 2017. 1. 10. [파이썬3]URL 여러 페이지 자동으로 만들기 #여러 웹페이지 동적변수 만들기 import urllib.requestracingGirlUrl = 'http://gall.dcinside.com/list.php?id=racinggirl&no='for no in range(170710, 170720):print(racingGirlUrl + str(no)) #여러 웹페이지 불러오기 import urllib.requestracingGirlUrl = 'http://gall.dcinside.com/list.php?id=racinggirl&no='for no in range(170710, 170720):url=racingGirlUrl+ str(no)f = urllib.request.urlopen(url) #여러 페이지 내 html 불러와서 보기 import url.. 2017. 1. 9. [네이버]Open API 없이 네이버 뉴스 웽 크롤러 """네이버 뉴스 기사 웹 크롤러 모듈""" from bs4 import BeautifulSoupimport urllib.request # 출력 파일 명OUTPUT_FILE_NAME = 'output.txt'# 긁어 올 URLURL = 'http://news.naver.com/main/read.nhn?mode=LSD&mid=shm&sid1=103&oid=055'\ '&aid=0000445667' # 크롤링 함수def get_text(URL): source_code_from_URL = urllib.request.urlopen(URL) soup = BeautifulSoup(source_code_from_URL, 'html.parser', from_encoding='utf-8') text = '' for it.. 2017. 1. 9. 이전 1 ··· 109 110 111 112 113 114 115 116 다음 반응형