python爬虫配置随机请求头headers伪装User-Agent

fake_useragent 库

调用方法 ua.random可以随机返回一个headers(User-Agent)

from fake_useragent import UserAgent   # 下载:pip install fake-useragent
import requests

ua = UserAgent()        # 实例化,需要联网但是网站不太稳定-可能耗时会长一些
print(ua.random)  # 随机产生
headers = {
    'User-Agent': ua.random    # 伪装
    }

请求
if __name__ == '__main__':
    url = 'https://www.baidu.com/'
    response = requests.get(url, headers=headers ,proxies={"http":"117.136.27.43"})
    print(response.status_code)

Original: https://www.cnblogs.com/rainbow-1/p/16725473.html
Author: 靠谱杨
Title: python爬虫配置随机请求头headers伪装User-Agent

原创文章受到原创版权保护。转载请注明出处:https://www.johngo689.com/562137/

转载文章受原作者版权保护。转载请注明原作者出处!

(0)

大家都在看

亲爱的 Coder【最近整理,可免费获取】👉 最新必读书单  | 👏 面试题下载  | 🌎 免费的AI知识星球