寻一位高级网络爬虫与反反爬虫技术工程师

70 天前
 panda777
🚀 高级网络爬虫与反反爬虫技术工程师
( Senior Web Scraping & Anti-Bot Engineer )

📍 工作模式:100% 远程办公
🌎 工作地点: 全球范围内均可申请
💰 薪资范围: 每月 $3,200 至 $4,500 美元 (表现卓越的候选人可调整上线)

🕵🏻‍♂️ 职位描述
我们正在寻找一名经验丰富的高级网络爬虫与反爬虫工程师,擅长基于 Python 的网络爬取、反爬虫技术和数据整合。在此岗位上,您将负责开发和维护高性能、可扩展的爬虫系统,从航空公司和酒店网站获取重要的定价与会员数据。这些网站均受到高级反爬虫技术保护(例如 Akamai 、Kasada 、Cloudflare 、DataDome 、PerimeterX 等)。主要技术栈为 Python ,优先使用 AWS 云基础设施。

🔴 必备要求
• 熟练掌握高级 Python 网络爬虫工具和框架(如 Playwright 、Puppeteer 、Selenium 、Scrapy 等)。
• 有成功绕过复杂反爬虫系统的经验(包括 Akamai 、Kasada 、Cloudflare 、DataDome 、PerimeterX 等)。
• 精通代理技术、IP 轮换、浏览器指纹技术和 TLS 指纹技术等反屏蔽策略。
• 能够设计并实现分布式、高性能的网络爬虫系统,以便并发地从多个来源获取数据。
• 出色的英语沟通能力,能够顺利融入国际远程团队。
• 具备从用户认证网站提取数据的实际经验,能够处理复杂的认证流程,包括 MFA/2FA 。

🟢 优先考虑
• 拥有 API 逆向工程( reverse-engineering ,如 GraphQL 、JSON API 等)的相关经验。
• 熟悉网络流量捕获与分析工具(如 mitmproxy 、Burp Suite 等)。
• 了解事件驱动架构和消息系统(如 Kafka 、RabbitMQ )。
• 熟悉 AWS 云服务和基础设施。

加入我们的国际团队,一起重新定义旅游和会员领域的数据聚合方式

有意者请直接发送简历(英文版更加)至下方地址:
ZGFuaWVsQG5pdXJvLmlv
1888 次点击
所在节点    酷工作
2 条回复
wmm1996528
70 天前
我就是做航司的 但是英语不好
Akamai 、Kasada 、Cloudflare 这三个都做过
panda777
64 天前
没有合适的小伙伴吗

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://yangjunhui.monster/t/1114884

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX