前言在工作中，遇到了指纹认证很强，hook等逆向的性价比不高的时候。一般我会考虑使用使用selenium一般我们会默认安装selenium，但是很多机构都会禁止掉selenium。这个时候就建议使用undetected-chromedriver安装和使用pipinstallundetected_chromedriverimportundetected_c

23、undetected-chromedriver：绕过反爬检测的Python库。这是一个经过优化的SeleniumWebDriver补丁，专门用于防止浏览器自动化过程中，触发反机器人机制。它能够隐藏浏览器特征（指纹），使用起来十分方便，就像一个Python的第三方库一样。importundetected_chromedriverasucdriver

1.Chromium和Driver安装sudoaptupdate&&sudoaptinstallchromiumchromium-driver2.复制一份到当前用户目录cp/usr/bin/chromedriver/home/myuser/.local/share/undetected_chromedriver/chromedriver_copy 3.Python启动代码importundetected_chromedriver

#-*-coding:utf-8-*-importjsonimportosimportsslimportsysimporttimeimportundetected_chromedriverasucfromseleniumimportwebdriverpath=os

模拟登录，可以解决某些网站，必须要登录才能抓取的问题。模拟登录就是要拿到网站的cookie。当爬虫程序进入网站开始抓取时数据时，爬虫的入口并不是scrapy 给定的pass，而