首页 > 编程语言 >求大神解答:利用python爬取各县GDP结果为空,求大神看看我的代码问题在哪?

求大神解答:利用python爬取各县GDP结果为空,求大神看看我的代码问题在哪?

时间:2022-10-28 15:05:39浏览次数:55  
标签:GDP xpath center python 大神 url __ text div

目标url=红黑人口库


代码

import requests

from lxml import etree

import time

if __name__ =='__main__':

   url = 'https://pagead2.googlesyndication.com/getconfig/sodar?sv=200&tid=gda&tv=r20221020&st=env'

     #'https://pagead2.googlesyndication.com/getconfig/sodar?sv=200&tid=gda&tv=r20221020&st=env'

   headers = {'User-Agent': 'User-Agent:Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0;',

              'Referer': 'https://www.hongheiku.com/',


   }

   response = requests.get(url=url, headers=headers).text

   html = etree.HTML(response)

   divs = html.xpath('/html/body/section/div[1]/div/article/table/tr[@class="even"]')

   print(response)


   for div in divs:

       area=div.xpath('//a/center/text()')

       GDP=div.xpath('//td[3]/center/text()')

       year=div.xpath('//td[4]/center/text()')

       #title='saas'.join(div.xpath('./div/div[3]/a/text()'))

       #companyname=div.xpath('./div/a/div[2]/div[1]/div/text()')[0]

       print(GDP)


标签:GDP,xpath,center,python,大神,url,__,text,div
From: https://blog.51cto.com/u_15851119/5804870

相关文章

  • python3.9不支持win7
    安装:Anaconda3-2022.10-Windows-x86_64.exe会报错:FailedtocreateAnacondamenus详细信息:ErrorloadingPythonDLLxxxpython39.dll,LoadLibrary:PyInstaller:Forma......
  • python自学 简单的网站开发 1
     URL路由配置 1、先在PyCharm中创建个Django项目,然后在PyCharm中的终端窗口输入。pythonmanage.pystartappmyapp 创建一个名字为myapp的应用2、然后在终......
  • c# - mono - 调用 python 脚本 .py 文件
    c#-mono-调用python脚本.py文件一、定义命令行工具:在windows下是cmd.exe,在mac下使用bash。二、踩过的坑使用Process类,启动一个“命令行工具”,在通过向标准......
  • python - 字符串、日期时间转+格式化
    python-字符串、日期时间转+格式化 #!/usr/bin/envpython3#coding=utf-8importosimportsysimportargparseimportcodecsimporttime,datetimedeftest():#"24/......
  • python - 定时拆分备份 nginx 日志
    python-定时拆分备份nginx日志一、背景:nginx的log不会自动按天备份,而且记录时间格式不统一,此程序专门解决这两个问题;二、windows部署方式1.在nginx目录,创建一个n......
  • python - 分析 iis 日志 wwwlogs
    python-解析iis日志iis日志分析工具比较多,基本都支持windows(不夸平台),统计维度也有限。有找工具的时间还不如自己写一个!!!分析时注意iis日志是格林尼治时间,没有加时区。分......
  • python-爬虫-使用 tomd 库,将 html 转换为 markdown 文档
    python-爬虫-使用tomd库,将html转换为markdown文档编码问题搞死人!注意:写python前要先设置两个位置的编码,一个文件顶部设置文件编码,一个是impor......
  • python-爬虫-自带库抓取网页内容
    python-爬虫-自带库抓取网页内容版本:Python2.7.10 python-爬虫-自带库抓取网页内容版本:Python2.7.10#-*-coding:utf-8-*-importsysimportl......
  • python-比较两个文件交集、并集、差集
    python比较两个文件交集、并集、差集#!/usr/bin/envpython2.7#coding=utf-8'''s05=set(['x','b','a'])s06=set(['c','x','e'])'''s05=set(open('/Users/.../1205.txt','r'......
  • python-爬虫-requests.get()-响应内容中文乱码
    python-爬虫-requests.get()-响应内容中文乱码由于目标url的headers没有提供charset,那么这串字节流就会用latin-1转换为unicode编码的方式转换成......