python做爬虫时候出现反爬怎么办

大耗子 2020年03月03日 237次浏览

文章链接:https://codemouse.online/archives/546546545

添加头防止网页不允许爬网页

headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) '
'AppleWebKit/537.36 (KHTML, like Gecko) '
'Chrome/51.0.2704.63 Safari/537.36'}