首页 > 其他分享 >eduSrc域名收集脚本

eduSrc域名收集脚本

时间:2023-02-09 10:02:39浏览次数:54  
标签:收集 text req tree headers 域名 res eduSrc com

eduSrc主域名查找脚本

二改版本,原作者项目地址:
https://github.com/Ernket/edu-crawler
原作者的可能下载下来不能直接用,这个则可以。刚改完,热乎的哈哈哈

效果,可以直接拿来用

用法:

直接输入省即可,用拼音的方式输入,如辽宁 liaoning

下载: https://wwux.lanzouw.com/iA1Kn0myt3od
密码:31ge

原理

首先是高校名称的获取
根据 http://u.feelingmsg.com 进行高校名称的获取

获得高校名再去bing进行搜索,将第一个结果的url提炼出来

def schoolsite(n):
global bing
for i in n:
bingurl=bing+i
req = requests.get(bingurl,headers=headers)
tree=etree.HTML(req.text)
res=tree.xpath('//div[@class="b_caption"]/div/cite/text()')

def eduName(url):
req = requests.get(url,headers=headers)
req.encoding="gb2312"
tree = etree.HTML(req.text)
res=tree.xpath("//tr/td/span[@class='STYLE54']/a/text()")
print(res)
schoolsite(res)

最后就是结果输出到txt文件中

标签:收集,text,req,tree,headers,域名,res,eduSrc,com
From: https://www.cnblogs.com/xinux/p/17104099.html

相关文章

  • 读Java实战(第二版)笔记04_用流收集数据
    1. 方便程序员和可读性是头等大事!1.1. 函数式API设计更易复合和重用2. 归约和汇总为一个值2.1. counting()2.1.1. 计数2.2. maxBy2.2.1. 查找流中的最大值2......
  • 信息收集_网络扫描_nmap
    信息收集_网络扫描nmap参考文章参考文章更多参考目标说明-iL<inputname>(从列表或文件输入)-iR<hostnum>(随机选择生成目标数量)--exclude<host1,host2>(排除......
  • CMS收集器
    ConcurrentMarkSweep(CMS),是一种年老代垃圾收集器,其最主要目标是获取最短垃圾回收停顿时间,和其他年老代使用标记-整理算法不同,它使用多线程的标记-清除算法。最短的垃圾收......
  • G1收集器
    Carbagefirst垃圾收集器是目前垃圾收集器理论发展的最前沿成果,相比CMS收集器,G1收集器两个最突出的改进是:1.基于标记-整理算法,不产生内存碎片。2.可以非常精准控制停顿时间,......
  • PHP开发者最好的学习资源收集
    以下内容翻译自:​​phpbuilder.com​​​的​​PHPDeveloperResources​​​文章。资源全为英文资料,不过英文很多文章确实写的非常好!当今PHP是开发WEB应用程序最流行的脚......
  • shell/hadoop/hive一些有用命令收集
    有些命令工作中经常用到,记录在一个文章里用于查阅,本文经常更新。shell命令linux统计某个目录下所有文件的行数的命令find/home/crazyant-typef-name"*"|xargsca......
  • vue3.0 同一项目中调用多个域名的请求
    1.简单粗暴形式:复制多个request.js文件,设置不同的baseUrl,根据需要引用不同的request.js文件。可以解决问题,但不推荐使用2.参数配置形式:利用参数配置,可灵活的调用多个不......
  • 闲话收集
    一些闲话。没有文学水平,是且仅是记录当时的感情或者是生活。从新到旧排序,一些太垃圾的就没有从洛谷搬过来。我画出奇怪的梦洗内裤了Whureereyoaexpedition吵死了......
  • <ORACLE NOTE> 1. Partition table Management --- 分区表最大分区字段信息收集
    分区表分区最大分区字段sql生成SELECT'selectnvl(to_char(max('||column_name||')),''0'')from'||owner||'.'||name||'unionall'FROMDBA_PART_KEY_......
  • 什么是信息收集
    信息收集(1)信息收集的作用信息搜集的目的是获取渗透目标的准确信息,以了解目标组织的运作方式,确定最佳的进攻路线(2)信息收集的分类可分为被动收集和主动收集......