params = []
from bs4 import BeautifulSoup
import re # 데이터 정제 전문 모듈
import urllib.request
text1 = urllib.parse.quote('인공지능')
for i in range(1,2):
list_url = "https://search.hankookilbo.com/Search?Page=" + str(i)+"&tab=NEWS&sort=relation&searchText=" +text1+"&searchTypeSet=TITLE,CONTENTS&selectedPeriod=%EC%A0%84%EC%B2%B4&filter=head"
# 파이썬이 위의 url 을 인식할 수 있도록 하는 코드 3줄을 실행
import urllib.request # 파이썬의 웹의 주소를 인식할 수 있게 해주는 모듈
url = urllib.request.Request( list_url )
f = urllib.request.urlopen(url).read().decode("utf-8")
soup = BeautifulSoup(f,"html.parser")
for i in soup.select("div.inn > h3 > a"):
a = i.get("href")
params.append(a)
print(params)