首页 > 其他分享 >杭州爬虫20-30K

杭州爬虫20-30K

时间:2024-10-29 14:02:03浏览次数:3  
标签:00 20 爬虫 抓取 工作 优先 30K

岗位职责:
1、负责设计、开发、维护爬虫系统;
2、参与多平台信息的抓取和分析;
3、建立完整的数据获取、解析、入库和监控流程,并不断优化迭代完善;
4、设计爬虫反屏蔽规则,提升网页抓取的效率和质量;
5、利用主流的大数据相关技术,对抓取后的网页数据进行清洗、存储等;并持续优化平台,以便满足各种爬取业务需求。
任职资格:
1、熟悉RUST语言,熟练掌握js反混淆,有实操经验优先;
2、实操过akamai,datadom,cloudflare等国外cdn供应商防护优先;
3、熟悉linux开发环境,熟练掌握java或python编程语言,熟悉js语言;
4、熟悉 web/app 常见的反爬机制,精通各种反爬破解,包括但不限于:Js防护、混淆、逆向分析、App防破解、防逆向、加固技术等技能;
5、有电商类网站爬虫经验优先,有高频爬虫工作经验者优先。

工作时间&地点:
(请仔细阅读以下事项安排,可接受的再投递简历!!!)
1、工作性质为全职,大部分时间可远程居家办公。
2、双休,每周工作5天休息2天,休息日可在周一到周五内自行选择休息2天或公司安排指定2天。
3、每周周一到周五需要有3个下午时间即14:00-18:00来公司工作 现场沟通。(其余时间和周末均可远程)
4、工作时间周中14:00-24:00,周末9:00-20:00。
5、法定节假日错峰调休。
6、因为做海外票务平台项目 业务高峰期和常规工作时间有一定时差, 非销售岗位。 公司接受远程办公主要是为了在这样特殊工作时间安排体系下能够尽可能为员工提供便利。
————————————————

                        版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。

原文链接:https://blog.csdn.net/yyw111111/article/details/143279786

标签:00,20,爬虫,抓取,工作,优先,30K
From: https://www.cnblogs.com/yyy111-/p/18512930

相关文章

  • 2024前端面试训练计划-高频题-JavaScript基础篇
    具体内容结构(可作为回答思路)为:简略回答,详细回答1、JavaScript有几种数据类型?简略回答JavaScript共有八种数据类型,分别是Undefined、Null、Boolean、Number、String、Object、Symbol、BigInt。详细回答具体来说,分为两种类型:原始数据类型和引用数据类型:原始数据类型......
  • NGINX 1.20.1版安装stream模块
    NGINX于1.9.0版本开始支持stream模块来代理tcp连接。在Centos操作系统若前期以YUM方式安装了nginx,后期想要添加stream模块。1.首先需要检查nginx版本是否支持这一特性,若已支持可直接安装模块,否则重装。2.其次按照如下步骤(部分步骤仅做参考,未必需要执行)2.1安装CentOS的epel-releas......
  • 洛谷 语言月赛 202401
    B3913[语言月赛202401]装满葡萄汁的酒杯[语言月赛202401]装满葡萄汁的酒杯-洛谷B3914[语言月赛202401]分饼干I[语言月赛202401]分饼干I-洛谷B3915[语言月赛202401]跳房子[语言月赛202401]跳房子-洛谷B3916[语言月赛202401]区间函数......
  • 2024年双11买什么最划算?双十一超全购物指南!
    随着2024年双十一的脚步日益临近,消费者们又开始摩拳擦掌,准备在这个一年一度的购物狂欢节中尽情选购心仪的商品。然而,面对市场上琳琅满目的各类产品,很多人都会陷入迷茫:2024年双11买什么最划算?为了帮助大家在双十一的购物海洋中顺利“航行”,找到最具性价比的商品,我们特别精......
  • HNU-操作系统实验lab6-2022级
    实验目的任务调度是操作系统的核心功能之一。UniProton实现的是一个单进程支持多线程的操作系统。在UniProton中,一个任务表示一个线程。UniProton中的任务为抢占式调度机制,而非时间片轮转调度方式。高优先级的任务可打断低优先级任务,低优先级任务必须在高优先级任务挂起或......
  • 阿里云消息团队创新论文被软件工程顶会 FM 2024 录用
    近日,由阿里云消息队列团队发表的关于RocketMQ锁性能优化论文被CCF-A类软件工程顶级会议FM2024录用。FM2024是由欧洲形式化方法协会(FME)组织的第24届国际研讨会,会议汇聚了来自各国的形式化研究学者,是形式化方法领域的顶级会议。FM2021强调形式化方法在广泛领域的开发......
  • C#的vs2019项目打包安装程序exe
    C#的vs2019项目打包安装程序exe1.在扩展插中安装插件在Nget包管理器中搜索如下名字的插件MicrosoftVisualStudioInstallProjects点击安装后重启vs20192.创建SetupProject项目完成安装后点击项目中新建项,创建SetupProject的项目创建完成后点击图中步骤添加文件,将你......
  • 题解:P3352 [ZJOI2016] 线段树
    首先,题目上说让期望乘上\((\frac{n(n+1)}{2})^q\)的目的就是让我们求方案数与值的乘积。然后我们考虑在操作过后一个位置上的值相对于原来的值肯定是不降的,于是可以想到对每一个值\(v\),原序列中所有\(\lev\)的元素一定构成了若干连续的区间。对每一个这样的区间而言,操作过......
  • ja-netfilter无法激活2024.2版本的问题
    内容节选自:@lzskylineJetBrains新版本2024.2在设置里添加了区域选择,具体在:Appearance&Behavior->SystemSettings->LanguageandRegion->Region中设置。如果你选择ChinaMainland将会有一个比较坑的地方:激活许可验证走account.jetbrains.com.cn这个域名,而不是默认......
  • CNCC2024:网易伏羲主题分论坛圆满落幕,专家共论推动产学研深度融合
    10月26日,为期三天的2024中国计算机大会(CNCC2024)在浙江省东阳市横店镇圆明新园顺利落下帷幕。本届大会以“发展新质生产力,计算引领未来”为主题,吸引了数万名计算领域专业人士参会。本次大会邀请到了17位国内院士,800余位国内外顶尖学者、企业技术精英,通过特邀报告、大会论坛以及138......