「爬虫职海录」最“地道儿”的爬虫岗位,了解一下?
发表时间:Mon Dec 18 2023 16:41:06 GMT+0800 (中国标准时间)
HI,我是K哥
近期打算新设**「爬虫职海录」专栏,内容方向会以爬虫相关的“岗位分析”和“职场访谈”**为主,方便大家了解一下当下的市场行情。
本栏目持续更新,暂定收集国内主要城市的爬虫岗位相关招聘信息,有求职和跳槽打算的小伙伴们,可以多多关注。
本期为北京篇!
我从招聘网站找来了**400+**份当前北京的爬虫岗位JD,另外找了一些爬虫相关的行业报告做参考,拿到数据后,整理汇表制图,最终呈现给大家。
诚然,K哥一个人能采集到的信息是有限的,视角也相对片面,所以我不能说这是一篇很全面很硬核的分析报告,但这应该是最”热乎儿“的,关于当下北京爬虫岗位招聘的点评文章,希望能多少对大家有一些帮助!
(各大城市当前爬虫工程师岗位收入)
(各大城市当前爬虫工程师岗位需求)
要了解一个城市对于某一岗位的友好程度,是需要同比其他城市的,所以我一共找来了北上广深杭5个城市的相关数据做参照。
可以看到,目前北京的爬虫工程师们,平均收入为16796,收入中位数是14625,仅次于上海。
但是!!在岗位需求这一块儿是第二名上海的两倍,属实是遥遥领先了。
(北京在职爬虫工程师部分数据)
以上是当前北京在职爬虫工程师的相关数据,
下边我们再看看当下的实际招聘情况。
(北京当前爬虫岗位招聘薪资)
招聘信息上挂出的薪酬,月薪大多在15000~25000这个大区间内,已经很不错了!
另外K哥在收集招聘信息时,顺便为大家整理了一些关键词,包括公司行业、公司规模、岗位title、技能标签、学历要求、福利待遇等方面,兄弟们可以瞅瞅。
(北京爬虫岗位招聘信息词云图)
能看到,比较突出的关键词是**“本科”、“python”、“五险一金”、”年终奖“、”带薪年假“、”3—5年“、”20—99人“**,说明这些信息在招聘jd里高频出现,代表了大部分公司的招聘情况。
K哥锐评—城市&岗位(5分制)
BEI JING
岗位情况:★★★★☆(4.5)
北京拥有全国最多的爬虫岗位需求,机会多多。
但大量稀缺的基本是3-5年经验的爬虫工程师,学历要求本科及以上,这也反映了对求职者的一定限制。
薪酬水平:★★★★☆(4.5)
工资处于全国前列,仅次于上海,大部分爬虫工程师在工作稳定后,都能拿到20W左右的年薪,而大部分人的天花板,基本在30W的水平线。
城市潜力:★★★★(4)
作为我国的首都和最大城市,国家政治经济文化中心,北京的影响力毋庸置疑。
但从工作角度而言,北京的生活成本,通勤交通,气候条件,都存在一些问题,且对于人才补贴的相关政策,北京也并不占优。
K哥评分:★★★★☆(4.5)
除开自身主观因素的话,对于爬虫工程师来说,“北漂”在目前仍然是一个非常不错的选择,首都毕竟是首都啊,地道真地道儿!
北京丨爬虫岗位
(以下岗位为随机列举,信息来源——BOOS直聘)
01
语智云帆
-0-20人
-咨询 人工智能
地址|北京海淀区泰跃商务中心4层
爬虫工程师实习生
4-8K
职位详情:
1、研究各种网页、app接口,探寻特点和规律;
2、编写抓取互联网内容的爬虫;
3、协助解析软件协议;
4、协助数据清洗、整理。任职要求:
1、计算机相关专业在读本科生或研究生,2024年毕业优先;
2、可稳定实习3个月以上,每周保证4天以上到岗实习;
3、熟悉网页抓取原理及技术,了解基于Cookie的登录原理;
4、熟悉基于正则表达式、XPath、CSS等网页信息抽取技术;
5、熟练掌握HTML/CSS/JS,熟悉Web标准;
6、熟练掌握任意后端编程语言,优先考虑Python。其他:
1. 优秀者待遇可谈,表现出色有bonus;
2. 不定期嗨-party,零食水果,隔周五学习分享会,拓宽视野;
3. 资深技术带头人帮助快速实现自我技术升级突破;
02
360集团
-1000-9999人
-互联网 软件服务
地址|北京朝阳区360公司B座
爬虫工程师
20-35K·15薪
职位详情:
1、负责全网搜索大环的总体设计、功能实现与模型优化,保证系统优秀的数据整合能力和高效、稳定的服务质量;
2、具备较强的技术热情,了解业内主流公司,在抓取领域的先进技术方向,并能做较好的技术迁移;
3、在搜索领域有较深的理解,对于核心指标有清晰的认知,能够以指标为驱动,将数据做到极致;
4、具备很强的技术规划及落地能力,同时有较为综合的技术领域经验积累,稳定支撑万亿级数据的落地。
任职要求:
1、出色的问题分析和解决能力,总是能从纷繁复杂的现象中一眼看出问题本质;
2、优秀的系统设计或算法模型能力,能够深入复杂的业务场景及数据模型,不设边界的驱动平台持续优化;
3、强悍的编程功底,能够举一反三,从容地用代码解决日常工作中面临的各种工程难题和算法挑战;
4、对产品有强烈的责任心,具备良好的产品意识、沟通能力和自我驱动能力;
5、有搜索、大数据处理,内容质量等相关数据平台开发经验的加分;
6、如果你绝顶聪明,总能快速学习成为领域专家,可忽略以上所有要求,我们愿意培养你,与你共同学习和成长。
其他:
上午09:30 - 下午06:30 双休
员工食堂 健身房,理发室,按摩师,班车
03
国知信
-20-99人
-专利/商标/知识产权
地址|北京通州区天骥·智谷60号
高级爬虫工程师
10-15K
职位详情:
1、懂八爪鱼的爬虫式的规则,要操作相关经验
2、负责团队的爬虫板块,
2、发展空间大。团队初创阶段,目前仅该板块空白;
3、负责搭建爬虫体系,对采集系统的安全性、扩展性、伸缩性负责,保证采集系统的高性能和高可用;
4、编写、审查、维护技术文档任职要求:
1、20-35岁,要求至少3年以上 Python 或 Java 爬虫开发经验;
2、精通网页抓取原理与技术,熟悉JS逆向,扎实的网页、接口的分析能力;
3、有解决复杂的反爬限制经验,能解决如图片验证码、滑块、ip限制等问题;(ps:不需要手撕akm)
4、负责公司业务数据的采集、处理和分析,熟悉对象存储、网络共享存储;
5、不断研究并应用最新的技术手段进行信息提取与分析,提高工作效率和准确性;
6、【团队主义】、【责任心】、【学习能力】是重点考量要素,对自己有较高要求其他:
8:30-5:30 双休
节假日休息入职上五险一金
04
同程旅行
-1000-9999人已上市
-互联网 旅游
地址|北京朝阳区电子城·IT产业园同程旅行大厦
爬虫工程师
20-40K·15薪
职位详情:
1. 根据具体的产品需求,完成逆向破解和数据工程化抓取
2. 调研Hook改机,设备指纹,非标准混淆算法还原,风控对抗等
Android逆向任职要求:
1. 熟悉dex/elf文件格式,了解jni底层原理,熟悉smali语法和arm指令
2. 对常用的加解密算法有一定的研究,能够还原非标准的ollvm混淆算法
3. 有较强的程序逆向分析能力,对软件安全和逆向领域有强烈爱好
4. 熟悉各类hook,native hook及注入框架,包括但不限于xposed,frida,cydia等任职要求:
1. 负责IOS的逆向和破解工作,开发工程化的抓取程序
2. 根据具体的产品需求,为公司提供数据抓取支持
iOS逆向任职要求:
1. 熟悉iOS逆向工程,有较强的逆向分析调试能力,能够独立开发iOS插件
2. 熟悉ARM,ARM64指令集,扎实的C/C++/OC开发基础和经验
3. 熟悉常见的加解密算法
4. 熟练使用IDA,frida,lldb,Olly DBG等逆向分析调试工具
5. 熟悉HTTP,TCP等网络协议及数据抓包和分析加分项:
1. 有各类APP的逆向破解实战经验的优先
2. 对于Android系统源码有过研究,能给按需修改和定制
2. 长期混迹于各类安全网站,知名大V的优先其他:
上午09:00 - 下午06:00 双休
05
辰星致远科技
-0-20人
-旅游
地址|北京石景山区宏开花园(诚海大厦西)3号楼
爬虫工程师
15-30K
职位详情:
1. 根据需求设计并实现自动化脚本进行数据收集与业务处理;
2. 负责爬虫客户端的设计、开发和维护,保证数据采集系统的稳定性和高效性;
3. 负责爬虫代码的优化和维护,依据目标站点升级不定期迭代;
4. 具有移动端逆向以及相关开发经验。任职要求:
1. 大专及以上学历,熟悉Flask、SpringBoot等爬虫框架,3年以上WEB及APP数据抓取经验;
2. 熟练掌握Charles,Fiddler,Wireshark等抓包工具;
3. 熟悉JS逆向、混淆、hook等技术;
4. 熟悉常见反爬手段IP封锁、Cookie加密、浏览器指纹、滑块等验证码识别等;
5. 熟悉常见的加密算法,包括对称加密、非对称加密以及常见编码方法;
6. 有境外航司数据抓取经验,有开发机票自动处理业务经验,了解Akamai、px2等过盾方法;
7. 具备较强的学习能力和自我驱动能力,能够不断学习和掌握新的技术和工具。
06
极睿科技
-100-499人
-互联网
地址|北京海淀区中关村创业大街11号楼
Python 爬虫工程师
10-15K
任职要求:
1、熟练掌握至少一门爬虫框架,熟练 Scrapy 优先;
2、熟练掌握基于正则表达式、XPath、CSS等网页信息抽取技术;
3、熟悉常见反爬机制,验证码识别,IP代理池;
4、熟悉应用Selenium+PhantomJS实施动态HTML抓取;
5、熟悉应用Ip池、headers认证和cookie等;
6、熟练使用http代理工具charles、fiddler等;
7、数据结构与经典算法等计算机基础扎实,逻辑思维较强;
8、热爱编程,喜欢折腾各类工具,热衷于探寻技术背后的原理;
9、责任心较强,做事细致耐心,具有良好的团队合作意识;
ps:
1,文中出现的岗位JD,包括薪酬,工作时间、福利等情况,均为招聘单位公示,我只是做了收集,实际情况大家可以主动联系招聘方进行咨询。
2,文中出现的岗位基本为随机选取,只作为参考,并不代表K哥推荐,我并未收取任何单位以及个人的广告费,也不提供简历投递渠道。
3,文中出现的招聘信息截至发文,仍为在招状态,后期K哥不对相关信息的有效性负责。
4,关于爬虫&职场方面的内容,大家还希望看到哪些呢,欢迎多多向我提建议,也欢迎小伙伴们在评论区积极“吐槽”自己目前的公司。
国内外代理IP推荐
国内IP推荐**(无门槛88折优惠券)**
快代理10周年庆典❤️海外代理空前钜惠
点个在看你最好看