首页 > 其他分享 >某小说网站之内容获取

某小说网站之内容获取

时间:2024-04-21 15:22:19浏览次数:19  
标签:0.9 application 网站 text image 获取 html 小说 headers

import requests

headers = {
    'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.7',
    'Accept-Language': 'zh-CN,zh;q=0.9',
    'Cache-Control': 'no-cache',
    'Pragma': 'no-cache',
    'Proxy-Connection': 'keep-alive',
    'Referer': 'http://www.h528.com/',
    'Upgrade-Insecure-Requests': '1',
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/124.0.0.0 Safari/537.36',
}

response = requests.get('http://www.h528.com/post/25126.html', headers=headers, verify=False)
html=etree.HTML(response.text)
href=html.xpath('//div[@class="entry"]/p/text()')
print(''.join(href))

标签:0.9,application,网站,text,image,获取,html,小说,headers
From: https://www.cnblogs.com/xiaohai123/p/18148984

相关文章

  • 让人爱不释手的工具网站合集-搜嗖工具箱
    文心一言https://yiyan.baidu.com/​ChatGpt横空出世的横空出世好像一把钥匙,开启了大模型时代,国内也有不错的产品,比如百度的文心一言,从3.5到4.0看得见的成长,现在的文心一言是我们工作中不可缺少的好帮手!作为一个生成式对话产品可以帮助用户撰写想要的各种文本,百宝箱功能可......
  • 使用代理绕过网站的反爬机制
    最近在尝试收集一些网络指标的数据,所以,我又开始做爬虫了。:)我们在做爬虫的过程中经常会遇到这样的情况,最初爬虫正常运行,正常抓取数据,一切看起来都是那么的美好,然而一杯茶的功夫可能就会出现错误,比如403Forbidden,这时候打开网页一看,可能会看到“您的IP访问频率太高”这......
  • ASP.NET MVC4.0+EF+LINQ+bui+bootstrap+网站+角色权限管理系统(1)
    ASP.NETMVC4.0+EF+LINQ+bui+bootstrap+网站+角色权限管理系统(1) 本系列的的角色权限管理主要采用Dotnet MVC4工程内置的权限管理模块Simplemembership实现,主要有关文件是InitializeSimpleMembershipAttribute.cs和AccountModels.cs下面是对这两个文件的了解和改造 WebSe......
  • ASP.NET MVC4.0+EF+LINQ+bui+网站+角色权限管理系统(6)
    ASP.NETMVC4.0+EF+LINQ+bui+网站+角色权限管理系统(6) 快过年了,公司事情忙,好几天没有继续写博客,今天开始写账户模块系统登录,账户管理以及登录日志,首先新建登录日志数据表: ViewCode然后更改模型:AccountModels.cs ViewCode创建登录日志模型:M_UsersLoginLogs.cs View......
  • 国内chatGPT中文版网站有哪些?国内人工智能百花齐放!该如何选择?
    人工智能技术在中国的快速发展和普及,使得国内的人工智能产业日益壮大。在这些领域中,自然语言处理技术和聊天机器人已经取得了显著的进展。ChatGPT作为一种基于深度学习的聊天机器人模型,在国内得到了广泛的关注和应用。目前,有几个国产ChatGPT中文版网站备受瞩目。国产chatGPT汇总:......
  • Apple App Store API 快速获取app综合评分,最新评论
    iDataRiver平台https://www.idatariver.com/zh-cn/提供开箱即用的苹果应用商城appstore数据采集API,供用户按需调用。接口使用详情请参考appleAppStore接口文档接口列表1.获取指定app的基础信息参数类型是否必填默认值示例值描述apikeystring是idr_***......
  • Unity获取指定文件夹下的所有文件
    usingSystem.IO;publicvoidGetFiles(){stringpath=string.Format("{0}",Application.streamingAssetsPath);//stringpath=string.Format("{0}",@"C:\Users\USER\Desktop\JXBWG\Assets\StreamingAssets&qu......
  • WebFlux 中form data获取不到参数问题
    官网并不提供formdata以下方式获取@RequestMapping(path="/post",method=RequestMethod.POST,produces=MediaType.APPLICATION_JSON_VALUE)publicMono<Map<String,Object>>post(ServerWebExchangeexchange,@RequestBody(required=false)Str......
  • 便宜又好用的免费服务器-搭建网站必备!优惠服务器,你值得拥有!
    ++书谷网库++服务器收录大全便宜又好用的免费服务器——搭建网站必备!优惠服务器,你值得拥有!在数字化时代的浪潮中,拥有一个属于自己的网站已经成为个人、企业乃至机构展示自身形象、推广产品和服务的重要途径。然而,对于许多初学者和小型企业来说,搭建网站的成本和难度常常成为阻碍他......
  • jquery 实现获取本地图片并展示
    文件不能直接设置为img元素的src属性值。要展示file文件,需要在img属性中使用JavaScript来实现,可以参考以下代码:html页面代码:<inputtype="file"id="photoInput"accept=".jpg,.jpeg,.png"multiple><imgid="uploaded-image"/>然后在js中监听文件输入:......