[社招] [杭州] 蚂蚁集团-网络爬虫技术专家

联系方式

邮箱： [email protected] Wechat：15382397794 ，备注应聘

亮点：

• 搞数据的，支持 LLM&智能应用，数据是决定模型能力的水位核心要素，这块的积累长期看在都是非常有市场价值的。希望你有中、大型互联网工作经验，做过全网爬虫、搜索数据等更佳，对 ai 技术有好奇心和研究热情。
• 团队稳定，氛围好。强度相对更平衡，合理健康。

职级：

视面试而定，P6/P7/P8 都可以。Package 可以聊，范围参考脉脉。

职位描述：

1. 负责全网高价值互联网数据源发现，涵盖网页、PDF 、音视频等多模态来源，分析评估数据天花板，支持金融等核心领域数据全面覆盖；
2. 负责全网数据采集相关系统架构设计和开发工作，持续优化提升数据任务和系统能力水位，充分支持模型训练、RAG 搜索等数据需求；
3. 持续提升技术竞争力，在数据覆盖、数据时效、下载渲染成功率、采集成本方面做到行业领先水位；
4. 保障系统稳定性，预判并解决系统潜在技术风险，持续降低技术负债。

职位要求：

1. 精通数据采集/网络爬虫领域，具备解决全网爬虫核心问题实战经验，3 年以上大型互联网公司开发经验；
2. 熟练掌握 Java/Python/Go 当中至少一种编程语言，具备主导复杂系统架构设计能力；
3. 熟悉分布式架构和并发编程，熟悉业界主流大数据计算存储引擎 Spark/Flink/MaxCompute 等，具有数据密集型应用开发经验；
4. 有运用 LLM 能力解决生产问题案例可加分，熟悉网络协议及代理、浏览器引擎和移动端技术可加分。