首页 > 其他分享 >不需要写规则的采集工具-简数采集器

不需要写规则的采集工具-简数采集器

时间:2023-06-30 16:55:14浏览次数:40  
标签:智能 简数 列表 采集 采集器 详情页

简数采集器】是采集和导出非常简单、高效的网页采集器,浏览器直接登录使用无需下载,不用手写规则,智能识别+鼠标点选快速生成采集规则。

简数采集器不仅提供网页文章全自动采集、定时采集、定时自动导出等基本功能,还创新实现了智能识别和鼠标可视化点选生成采集规则(不用手写规则)、书签采集等特色功能,大幅提升了采集配置效率,大大节省了电脑资源和成本。

采集方法:

1. 创建采集任务

  点击简数采集器控制台左侧菜单按钮“创建采集任务”,输入采集任务名和要采集的”列表页“网址,如:https://www.域名.com/ (这里首页即作为列表页:内容含有多个详情页即可),详情页链接可填或不填,系统会自动识别。

如下图,输入完成后点击 “下一步”。

 

 

2. 完善列表页智能获取结果(可选)

  简数采集器会先采用智能算法获取需要采集的详情页链接(多个),如果不是想要的数据,可以点击“列表提取器”进行手动指定,只需要在可视化界面上用鼠标点击。

  智能获取结果如下图:

 

列表提取器 打开后如下图:

 

3. 完善详情页智能获取结果(可选)

  上一步获取了多个详情页链接后,继续下一步,系统会使用其中一个详情页链接来智能抽取详情页数据(如:标题,作者,日期,内容,标签等)

  详情页智能抽取结果如下:

 

如果智能抽取的内容不是想要的,请打开【详情提取器】进行修改,可以对左侧的各字段进行修改或增加删除等。如下图:

 

4. 启动采集数据

完成后,即可启动运行,进行数据采集了。

采集后的数据结果,在该采集任务的“结果数据&导出发送”里面,您可以在这里对数据进行导出发送。

 

使用简数采集器采集数据就是这么简单方便,大大提高采集效率。

 

标签:智能,简数,列表,采集,采集器,详情页
From: https://www.cnblogs.com/changyedai/p/17512335.html

相关文章

  • .Net core 采集网页表格数据方法
    使用HtmlAgilityPack库来将HTML表格转换为DataTable。首先,确保已经安装了HtmlAgilityPack包。可以通过NuGet包管理器或者通过命令行安装。按照以下步骤将HTML表格转换为DataTable:导入命名空间:csharpCopyCodeusingHtmlAgilityPack;创建一个方法来进行转换:......
  • PLC数据采集仪器网关
     www.daq-iot.com19936624847___________________________________________________产品简介功能特点技术参数DAQ-GP-IOTGW通用型数采仪是一款集数据采集、存储、边缘计算于一体的智能采集终端。支持网页配置,协议驱动丰富、广泛应用于汽车制造、化工、能源、风电等工业领......
  • 元数据采集包升级后主要功能不能使用
    1.具体问题背景2022年农历年前,为了解决大SQL文件血缘解析不能完整处理的问题。之前是由于单个线程对文件中的sql语句,进行血缘解析的,当有嵌套层次很深的语句时,线程超时终止(原因未确定),后代码优化,增加了线程池的多线程处理,每条语句采用单独的线程解析,避免一个语句不能执行,导致整个......
  • 记录一次项目数据采集分析-NEWC数据泄漏
     一不小心,把B圈的项目给扒拉下来了,发现这些大佬板还关联着PHA,PHIC两个盘子,号称国外。PHIC大本营在成都,哈哈哈,不要问我咋知道"15642377778""周传海""210219197403282316"项目方qq号378720717QQ群858864205"17771173077" "王云龙" "420222199402268316"项目方qq号34......
  • Qt联合海康威视工业相机采集,在线转Halcon变量并显示(独立封装、支持多相机、支持黑白相
    Qt联合海康威视工业相机采集,在线转Halcon变量并显示(独立封装、支持多相机、支持黑白相机和彩色相机)。原创文章,转载请说明出处,资料来源:http://imgcs.cn/5c/668685372998.html......
  • 亚马逊国际获得AMAZON商品详情API接口采集sku商品规格信息列表Java调用演示案例
    ​亚马逊商品详情API接口的作用是获取Lazada电商平台上的某一商品的详情信息,包括商品的名称、销售价格、库存数量、图片、商品描述、品牌、产地、售后保障等信息。开发者可以使用该API接口获取到商品的原始数据,进行分析、筛选等操作。通过该接口获取到的商品详情数据可以结合其......
  • 啤酒发酵罐数据采集远程监控系统解决方案
    发酵罐是啤酒生产过程中必不可少的设备,发挥着发酵的重要作用。随着工业物联网与通信技术的发展,传感器数据采集远程监控逐步应用于啤酒发酵过程,保证了发酵过程中的温度和压力的控制及时和精准,从而保证了啤酒的口感与风味。 发酵罐数据采集远程监控系统主要由传感器、数据采集网关、......
  • 脑电信号采集模块方案的技术阶段总结简析
    原理 脑电图(electroencephalogram,EEG)是通过精密的仪器从头皮上将脑补的大脑皮层的自发性生物电位加以放大记录而获得的图形,是通过电极记录下来的脑细胞群的自发性、节律性电活动。这种电活动是以电位作为纵轴,时间为横轴,从而记录下来的电位与时间相互关系的平面图。脑电波的频率(......
  • api接口接入淘宝/天猫平台采集添加到购物车数据调用演示案例
    ​淘宝添加到购物车API接口的作用是向淘宝购物车中添加指定的商品,实现用户将商品加入购物车的功能。通过该API接口,用户可以将商品加入购物车,方便后续进行结算和购买。使用淘宝添加到购物车API接口,可以帮助开发者和商家进行以下操作:购物车管理:允许用户将商品添加到购物车并进行......
  • 可穿戴多通道生理信号采集数据分析演示
    一前记基于ads129x系列的多通道生理信号采集设备的研发终于告一段落了。最近使用信号发生器测量了一下波形,发现信号质量还是非常不错的,甚至欣慰。做一个留念吧。二波形展示信号发生器发出了的方波信号,采集到的信号如下所示: 信号发生器发出了的正选波......