首页 > 其他分享 >requests爬取图片

requests爬取图片

时间:2023-02-09 15:26:21浏览次数:41  
标签:fnew keyword url 爬取 headers html requests 图片

#requests库爬取图片
import requests
from bs4 import BeautifulSoup
def spider():
    url='https://www.sogou.com/web'
    keyword=input('请输入信息')
    headers={
       'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/95.0.4638.54 Safari/537.36 Edg/95.0.1020.30'
    }
    pagarm={'query':keyword}
    html=requests.get(url=url,params=pagarm,headers=headers)
    htmltxt=html.text
    #filename=keword+'.html'
    fnew=open('F:/spidertest/'+keyword+'.txt','a',encoding='utf-8')
    fnew.write(htmltxt)
    fnew.close()
    print('保存成功')
spider()

标签:fnew,keyword,url,爬取,headers,html,requests,图片
From: https://www.cnblogs.com/tgfoven/p/17105400.html

相关文章

  • 练习爬取豆瓣
    #python爬虫的系统学习1frombs4importBeautifulSoupimportrequestsimportre#正则表达式importurllib.request,urllib.errorimportxlwtimportsqlite3findl......
  • JAVA PDF转图片,以及几种方案对比
    背景项目需要将PDF转为图片存储,在网上搜索,找到了三种方案(这里链接都是找的github上的地址):pdfbox,开源软件,apache社区在维护,还比较活跃icepdf,商业软件,但是github上有开......
  • vue 一次显示多张图片的轮播图
    1. npm i vue-slick-carousel<template><div><divclass="activities"><VueSlickCarouselv-bind="settings"><divclass="activity">......
  • vue 图片分页
    <divclass="activitiesphone"><!--动态--><divclass="activity"v-for="(item,index)inimgList.slice(......
  • CSS 3.0中图片颜色过滤特效
    给大家分享一个用CSS3.0写的图片颜色过滤的特效,效果如下:以下是代码实现,欢迎大家复制粘贴和收藏。<!DOCTYPEhtml><htmllang="en"><head><metacharset="UTF-8"><m......
  • 富文本编辑器实现网页图片自动上传
    ​ 图片的复制无非有两种方法,一种是图片直接上传到服务器,另外一种转换成二进制流的base64码目前限chrome浏览器使用首先以um-editor的二进制流保存为例:打开umeditor.j......
  • 前端图片压缩方案及代码实现
    1.为什么要进行图片压缩?随着互联网的发展,图片在各种网站和应用中铺天盖地,运营人员在后台管理系统中上传图片时常常忽略的图片的体积大小,随之产生的带宽和服务器容量也大大......
  • Python爬虫爬取html中div下的多个class标签并存入数据库
    使用python爬虫爬取html页面div中的多个class标签,获取后将数据存成列表,然后存入数据库importmysql.connectorimportpymysqlimportrequestsfrombs4importBeautif......
  • JavaScript插件 图片裁剪photoClip
    阅读目录​​JavaScript插件图片裁剪photoClip​​​​1、截图​​​​2、代码​​​​后台接收并处理图片代码​​JavaScript插件图片裁剪photoClip页面裁剪图片得到bas......
  • 图片从后台响应给浏览器
    packagecom.atping.servlet_;importorg.apache.commons.io.IOUtils;importjavax.servlet.ServletException;importjavax.servlet.ServletOutputStream;import......