• 2024-08-09selenium 反反爬-淘宝,美团
    1.反爬有时候,我们利用Selenium自动化爬取某些网站时,极有可能会遭遇反爬。实际上,我们使用默认的方式初始化WebDriver打开一个网站,下面这段JS代码永远为true,而手动打开目标网站的话,则为:undefined#通过这段JS脚本区分是爬虫还是人工操作window.navigator.webdriver2.
  • 2023-03-20爬虫使用如何提高使用HTTP代理的效率
    爬虫工作的进行离不开HTTP代理的支持,不同的爬虫需要不同的HTTP代理。由于爬虫工作量往往会比较大,因此效率非常重要,那么该怎么提高工作效率呢?1、使用高质量HTTP代理
  • 2023-02-25user-agent反反爬
    title:user-agent反反爬author:杨晓东permalink:user-agent反反爬date:2021-10-0211:27:04categories:-投篮tags:-demouser-agent反反爬importfake_use
  • 2022-11-29python-反反爬抖音(绕过抖音登录与新手引导)
    """反反爬--driver.get(网页)--人工登录后关闭程序--driver.get(网页)"""#1.普通浏览器:不能记录登录信息,容易触发反爬机制#fr
  • 2022-11-02聊一聊对一个 C# 商业程序的反反调试
    一:背景1.讲故事前段时间有位朋友在微信上找到我,说他对一个商业的C#程序用WinDbg附加不上去,每次附加之后那个C#程序就自动退出了,问一下到底是怎么回事?是不是哪里搞