Skip to content

「爬虫职海录」最“地道儿”的爬虫岗位,了解一下?

发表时间:Mon Dec 18 2023 16:41:06 GMT+0800 (中国标准时间)

kgepachong https://mmbiz.qpic.cn/sz\_mmbiz\_jpg/iabtD4jabia4K1R61xYLHMf0Kib6Bh6rdcwYYFdomvjLEUnRMGDvjciccIUibEKFgo7ic3oC9hhvKSH0rO4lj66dVK7w/0?wx_fmt=jpeg

HI,我是K哥

近期打算新设**「爬虫职海录」专栏,内容方向会以爬虫相关的“岗位分析”“职场访谈”**为主,方便大家了解一下当下的市场行情。

本栏目持续更新,暂定收集国内主要城市爬虫岗位相关招聘信息,有求职和跳槽打算的小伙伴们,可以多多关注。

本期为北京篇

我从招聘网站找来了**400+**份当前北京的爬虫岗位JD,另外找了一些爬虫相关的行业报告做参考,拿到数据后,整理汇表制图,最终呈现给大家。

诚然,K哥一个人能采集到的信息是有限的,视角也相对片面,所以我不能说这是一篇很全面很硬核的分析报告,但这应该是最”热乎儿“的,关于当下北京爬虫岗位招聘的点评文章,希望能多少对大家有一些帮助!

(各大城市当前爬虫工程师岗位收入)

(各大城市当前爬虫工程师岗位需求)

要了解一个城市对于某一岗位的友好程度,是需要同比其他城市的,所以我一共找来了北上广深杭5个城市的相关数据做参照。

可以看到,目前北京的爬虫工程师们,平均收入为16796,收入中位数是14625,仅次于上海。

但是!!在岗位需求这一块儿是第二名上海的两倍,属实是遥遥领先了。

(北京在职爬虫工程师部分数据)

以上是当前北京在职爬虫工程师的相关数据,

下边我们再看看当下的实际招聘情况

(北京当前爬虫岗位招聘薪资)

招聘信息上挂出的薪酬,月薪大多在15000~25000这个大区间内,已经很不错了!

另外K哥在收集招聘信息时,顺便为大家整理了一些关键词,包括公司行业、公司规模、岗位title、技能标签、学历要求、福利待遇等方面,兄弟们可以瞅瞅。

(北京爬虫岗位招聘信息词云图)

能看到,比较突出的关键词是**“本科”、“python”、“五险一金”、”年终奖“、”带薪年假“、”3—5年“、”20—99人“**,说明这些信息在招聘jd里高频出现,代表了大部分公司的招聘情况。

K哥锐评—城市&岗位(5分制)

BEI JING

岗位情况:★★★★☆(4.5)

北京拥有全国最多的爬虫岗位需求,机会多多。

但大量稀缺的基本是3-5年经验的爬虫工程师,学历要求本科及以上,这也反映了对求职者的一定限制。

薪酬水平:★★★★☆(4.5)

工资处于全国前列,仅次于上海,大部分爬虫工程师在工作稳定后,都能拿到20W左右的年薪,而大部分人的天花板,基本在30W的水平线。

城市潜力:★★★★(4)

作为我国的首都和最大城市,国家政治经济文化中心,北京的影响力毋庸置疑。

但从工作角度而言,北京的生活成本,通勤交通,气候条件,都存在一些问题,且对于人才补贴的相关政策,北京也并不占优。

K哥评分:★★★★☆(4.5)

除开自身主观因素的话,对于爬虫工程师来说,“北漂”在目前仍然是一个非常不错的选择,首都毕竟是首都啊,地道真地道儿!

北京丨爬虫岗位

(以下岗位为随机列举,信息来源——BOOS直聘)

01

语智云帆

-0-20人

-咨询 人工智能

地址|北京海淀区泰跃商务中心4层

爬虫工程师实习生

4-8K

  • 职位详情:

    1、研究各种网页、app接口,探寻特点和规律;
    2、编写抓取互联网内容的爬虫;
    3、协助解析软件协议;
    4、协助数据清洗、整理。

  • 任职要求:

    1、计算机相关专业在读本科生或研究生,2024年毕业优先;
    2、可稳定实习3个月以上,每周保证4天以上到岗实习;
    3、熟悉网页抓取原理及技术,了解基于Cookie的登录原理;
    4、熟悉基于正则表达式、XPath、CSS等网页信息抽取技术;
    5、熟练掌握HTML/CSS/JS,熟悉Web标准;
    6、熟练掌握任意后端编程语言,优先考虑Python。

  • 其他:

    1. 优秀者待遇可谈,表现出色有bonus;
    2. 不定期嗨-party,零食水果,隔周五学习分享会,拓宽视野;
    3. 资深技术带头人帮助快速实现自我技术升级突破;

02

360集团

-1000-9999人

-互联网 软件服务

地址|北京朝阳区360公司B座

爬虫工程师

20-35K·15薪

  • 职位详情:

    1、负责全网搜索大环的总体设计、功能实现与模型优化,保证系统优秀的数据整合能力和高效、稳定的服务质量;

    2、具备较强的技术热情,了解业内主流公司,在抓取领域的先进技术方向,并能做较好的技术迁移;

    3、在搜索领域有较深的理解,对于核心指标有清晰的认知,能够以指标为驱动,将数据做到极致;

    4、具备很强的技术规划及落地能力,同时有较为综合的技术领域经验积累,稳定支撑万亿级数据的落地。

  • 任职要求:

    1、出色的问题分析和解决能力,总是能从纷繁复杂的现象中一眼看出问题本质;

    2、优秀的系统设计或算法模型能力,能够深入复杂的业务场景及数据模型,不设边界的驱动平台持续优化;

    3、强悍的编程功底,能够举一反三,从容地用代码解决日常工作中面临的各种工程难题和算法挑战;

    4、对产品有强烈的责任心,具备良好的产品意识、沟通能力和自我驱动能力;

    5、有搜索、大数据处理,内容质量等相关数据平台开发经验的加分;

    6、如果你绝顶聪明,总能快速学习成为领域专家,可忽略以上所有要求,我们愿意培养你,与你共同学习和成长。

  • 其他:

    上午09:30 - 下午06:30  双休

    员工食堂 健身房,理发室,按摩师,班车

03

国知信

-20-99人

-专利/商标/知识产权

地址|北京通州区天骥·智谷60号

高级爬虫工程师

10-15K

  • 职位详情:

    1、懂八爪鱼的爬虫式的规则,要操作相关经验
    2、负责团队的爬虫板块,
    2、发展空间大。团队初创阶段,目前仅该板块空白;
    3、负责搭建爬虫体系,对采集系统的安全性、扩展性、伸缩性负责,保证采集系统的高性能和高可用;
    4、编写、审查、维护技术文档

  • 任职要求:

    1、20-35岁,要求至少3年以上 Python 或 Java 爬虫开发经验;
    2、精通网页抓取原理与技术,熟悉JS逆向,扎实的网页、接口的分析能力;
    3、有解决复杂的反爬限制经验,能解决如图片验证码、滑块、ip限制等问题;(ps:不需要手撕akm)
    4、负责公司业务数据的采集、处理和分析,熟悉对象存储、网络共享存储;
    5、不断研究并应用最新的技术手段进行信息提取与分析,提高工作效率和准确性;
    6、【团队主义】、【责任心】、【学习能力】是重点考量要素,对自己有较高要求

  • 其他:

    8:30-5:30 双休

    节假日休息入职上五险一金

04

同程旅行

-1000-9999人已上市

-互联网 旅游

地址|北京朝阳区电子城·IT产业园同程旅行大厦

爬虫工程师

20-40K·15薪

  • 职位详情:

    1. 根据具体的产品需求,完成逆向破解和数据工程化抓取
    2. 调研Hook改机,设备指纹,非标准混淆算法还原,风控对抗等
    Android逆向任职要求:
    1. 熟悉dex/elf文件格式,了解jni底层原理,熟悉smali语法和arm指令
    2. 对常用的加解密算法有一定的研究,能够还原非标准的ollvm混淆算法
    3. 有较强的程序逆向分析能力,对软件安全和逆向领域有强烈爱好
    4. 熟悉各类hook,native hook及注入框架,包括但不限于xposed,frida,cydia等

  • 任职要求:

    1. 负责IOS的逆向和破解工作,开发工程化的抓取程序
    2. 根据具体的产品需求,为公司提供数据抓取支持
    iOS逆向任职要求:
    1. 熟悉iOS逆向工程,有较强的逆向分析调试能力,能够独立开发iOS插件
    2. 熟悉ARM,ARM64指令集,扎实的C/C++/OC开发基础和经验
    3. 熟悉常见的加解密算法
    4. 熟练使用IDA,frida,lldb,Olly DBG等逆向分析调试工具
    5. 熟悉HTTP,TCP等网络协议及数据抓包和分析

  • 加分项:
    1. 有各类APP的逆向破解实战经验的优先
    2. 对于Android系统源码有过研究,能给按需修改和定制
    2. 长期混迹于各类安全网站,知名大V的优先

  • 其他:

    上午09:00 - 下午06:00 双休

05

辰星致远科技

-0-20人

-旅游

地址|北京石景山区宏开花园(诚海大厦西)3号楼

爬虫工程师

15-30K

  • 职位详情:

    1. 根据需求设计并实现自动化脚本进行数据收集与业务处理;
    2. 负责爬虫客户端的设计、开发和维护,保证数据采集系统的稳定性和高效性;
     3. 负责爬虫代码的优化和维护,依据目标站点升级不定期迭代;
    4. 具有移动端逆向以及相关开发经验。

  • 任职要求:

    1. 大专及以上学历,熟悉Flask、SpringBoot等爬虫框架,3年以上WEB及APP数据抓取经验;
    2. 熟练掌握Charles,Fiddler,Wireshark等抓包工具;
    3. 熟悉JS逆向、混淆、hook等技术;
    4. 熟悉常见反爬手段IP封锁、Cookie加密、浏览器指纹、滑块等验证码识别等;
     5. 熟悉常见的加密算法,包括对称加密、非对称加密以及常见编码方法;
    6. 有境外航司数据抓取经验,有开发机票自动处理业务经验,了解Akamai、px2等过盾方法;
    7. 具备较强的学习能力和自我驱动能力,能够不断学习和掌握新的技术和工具。

06

极睿科技

-100-499人

-互联网

地址|北京海淀区中关村创业大街11号楼

Python 爬虫工程师

10-15K

  • 任职要求:

    1、熟练掌握至少一门爬虫框架,熟练 Scrapy 优先;
    2、熟练掌握基于正则表达式、XPath、CSS等网页信息抽取技术;
    3、熟悉常见反爬机制,验证码识别,IP代理池;
    4、熟悉应用Selenium+PhantomJS实施动态HTML抓取;
    5、熟悉应用Ip池、headers认证和cookie等;
    6、熟练使用http代理工具charles、fiddler等;
    7、数据结构与经典算法等计算机基础扎实,逻辑思维较强;
    8、热爱编程,喜欢折腾各类工具,热衷于探寻技术背后的原理;
    9、责任心较强,做事细致耐心,具有良好的团队合作意识;

ps:

1,文中出现的岗位JD,包括薪酬,工作时间、福利等情况,均为招聘单位公示,我只是做了收集,实际情况大家可以主动联系招聘方进行咨询。

2,文中出现的岗位基本为随机选取,只作为参考,并不代表K哥推荐,我并未收取任何单位以及个人的广告费,也不提供简历投递渠道。

3,文中出现的招聘信息截至发文,仍为在招状态,后期K哥不对相关信息的有效性负责。

4,关于爬虫&职场方面的内容,大家还希望看到哪些呢,欢迎多多向我提建议,也欢迎小伙伴们在评论区积极“吐槽”自己目前的公司。


国内外代理IP推荐

国内IP推荐**(无门槛88折优惠券)**

快代理10周年庆典❤️海外代理空前钜惠

点个在看你最好看

阅读原文

上次更新于: