import requests
import re	# 정규식

url = “https//search.naver.com/search.naver”
params = {“query”: “파이썬”}
res = requests.get(url,params=params)
print(res.status_code)
html_data = res.text	# 응답페이지 코드 반환, str 타입
print(html_data)
firstWord = html_data.find(“연관 검색어”)
print(html_data[firstWord:firstWord+6])	# output 연관검색어
body = re.search(‘<h2>.*</h2>’,html_data)
print(body.group())	# output “<h2>파워링크</h2>”


from urllib import request
from urllib.error import URLError	# 예외 활용 가능
# requests모듈도 requests.exceptions. 를 통해 에러 제어가능

# 웹문서 접근, 문서 객체

try:
    site = request.urlopen(‘https://datalab.naver.com’)
except URLError as e:
    print(‘잘못된 접근’, e)
else:
    byte_data = site.read()	# 문서객체 읽기, 주어진 인자만큼을 데이터로 읽음
    text_data = byte_data.decode()
    print(text_data)

    # 이미지 저장하기-1
	url = ‘이미지 경로’
	imgName = ‘저장할 경로+이름’	# 미리 만들어져있어야함
	urlretrieve(url,imgName)

    # 이미지 저장하기-2
    img = request.urlopen(url).read()
    with open(‘이미지 경로+이름’, ‘wb’) as f:
    f.write(img)

from urllib.parse import *

baseURL = 'https://spongebob53.github.io/a/b'
# '/' 기준으로 경로를 수정해줌 : 상대경로와 절대경로
# 기준 경로에서 '/'로 끝나지 않고, 입력할 값도 '/'로 시작하지 않으면 서로 변경(b -> c)
print(urljoin(baseURL,'c'))     # output https://spongebob53.github.io/a/c
# 기준 경로에서 '/'로 끝나지 않고, 입력할 값에 '/'로 시작한다면 경로 이후에 메인경로 '/c'로 변경
print(urljoin(baseURL,'/c'))    # output https://spongebob53.github.io/c

baseURL = ‘https://spongebob53.github.io/a/b/’
# 기준 경로에서 '/'로 끝나고, 입력할 값도 '/'로 시작하지 않으면 이후 경로로 추가(b/c)
print(urljoin(baseURL,'c'))     # output https://spongebob53.github.io/a/b/c
# 기준 경로에서 '/'로 끝나고, 입력할 값에 '/'로 시작한다면 경로 이후에 메인경로 '/c'로 변경
print(urljoin(baseURL,'/c'))    # output https://spongebob53.github.io/c

# 예외케이스, 아예 주소를 입력했을 때
print(urljoin(baseURL, ‘https://spongebob53.github.io’))

# urllib.parse
# 파싱을 도와주는 모듈 : 주소들을 가지고 우리가 원하는 대로 조작할 수 있도록 도와주는 모듈

url = 'https://blog.naver.com/korea91;a=1?b=2#b'
parse = urlparse(url)
print(parse)    # output ParseResult(scheme='https', netloc='blog.naver.com', path='/korea91', params='a=1', query='b=2', fragment='b')
parse = urlsplit(url)
print(parse)    # output SplitResult(scheme='https', netloc='blog.naver.com', path='/korea91;a=1', query='b=2', fragment='b')