首页 > 其他分享 >爬虫内容保存到txt文件

爬虫内容保存到txt文件

时间:2022-12-26 21:04:01浏览次数:32  
标签:items 爬虫 保存 write item file text txt find


0x01 源码如下

from pyquery import PyQuery
import requests


url = "https://www.dandanzan10.top/dianying/index.html"
heads = {
'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/86.0.4240.198 Safari/537.36',
}
r = requests.get(url, headers=heads)
str = r.text
res=PyQuery(str)


items=res('div:nth-child(4) > ul > li').items()
file=open('aiyou.txt','w',encoding='utf-8')
for item in items:
name=item.find('h2').text()
file.write(f'电影名称:{name}\n')
pf=item.find('.rate').text()
file.write(f'评分:{pf}\n')
file.write(f'{"*"*50}\n')
file.close()

0x02 效果如下

爬虫内容保存到txt文件_html

 

0x03 声明

仅供安全研究与学习之用,若将工具做其他用途,由使用者承担全部法律及连带责任,作者不承担任何法律及连带责任。

欢迎关注编程者吧

爬虫内容保存到txt文件_Chrome_02

 

标签:items,爬虫,保存,write,item,file,text,txt,find
From: https://blog.51cto.com/u_15288375/5970995

相关文章

  • 爬虫学习笔记 -- 实战某电影网(lxml库版)
    0x01安装lxml库文件pip3installlxml0x02初始化字符串1、通过HTML类初始化字符串fromlxmlimportetreeimportrequestsurl="https://www.dandanzan10.top/dianying/i......
  • 爬虫学习笔记 -- requests库基础
    0x01requests库安装1、通过控制台运行下面代码pip3installrequests2、通过Pycharm安装,点击+号,搜索requests,然后点击安装 0x02GET请求1、普通请求importrequestsurl="h......
  • 爬虫学习笔记 -- 正则表达式
    0x01match1、从头开始匹配,只能匹配一次importrestr="1a2b3c456d7e890f"res=re.match('\d+',str)print(res.group())运行结果:12、通用匹配符.*?importrestr="11a2b3c456d7e......
  • MATLAB保存绘制的图片为PDF
    今天在导出MATLAB图片时总是变成.fig格式,别的软件也打不开。记录一下使用的方法在绘制图表的命令后加一句下述代码即可。gcf不改变,第二个参数表示要保存的文件名称。sa......
  • Python网络爬虫概述
    文章目录​​一.掌握定向网络数据爬取和网页解析的基本能力​​​​二.python开发工具选择​​​​1.文本工具类IDE​​​​2.集成工具类IDE​​一.掌握定向网络数据爬......
  • 强化学习如何保存模型?
    保存模的关键在于知道决定模型的东西是什么?框架和参数,有了框架保存参数,没有框架,全部保存。模型保存模型保存本质上是保存训练好的参数,便于重复利用模型,随时可以调用。......
  • Python爬虫学习:Cookie 和 Session 的区别是什么?
    一、含义Cookie意为“甜饼”,是由W3C组织提出,最早由Netscape社区发展的一种机制。目前Cookie已经成为标准,所有的主流浏览器如IE、Netscape、Firefox、Opera等都支持Cookie......
  • uni-app下载文件永久保存uni.downloadFile和uni.saveFile
    uni.downloadFile下载xiazai(){constdownloadTask=uni.downloadFile({url:'http://img.netbian.com/file/2019/0414/7bee7eef5fc44417a0b02......
  • 【k哥爬虫普法】爬取数据是否一定构成不正当竞争?
    我国目前并未出台专门针对网络爬虫技术的法律规范,但在司法实践中,相关判决已屡见不鲜,K哥特设了“K哥爬虫普法”专栏,本栏目通过对真实案例的分析,旨在提高广大爬虫工程师的法......
  • python网络爬虫(一)
    网络爬虫是一个很有意思的技术,我一直都想尝试着学习网络爬虫这项技术。其基本原理比较简单:就是模拟客户端发送请求,得到服务器端的响应,从中获取到有用的信息。但是现在的......