JOIN US

Python爬虫工程师

和务实而富有远见的人一起,做难而正确的事

岗位职责

  1. 爬虫开发与维护:基于Python编写高效爬虫脚本,完成数据采集、解析、存储全流程,保证准确与高效。
  2. 大模型应用对接:调用大模型API完成文本处理、任务优化,结合大模型提升效率。
  3. 技术问题排查:主动排查解决爬虫与采集过程中的各类技术问题,确保项目落地。
  4. 智能体平台部署运维:协助Dify等开源智能体平台部署、运维及迭代开发。
  5. AI原生项目探索:支持公司后续AI原生项目的探索与开发。

任职要求

  1. 学历经验:计算机/软件工程/信息管理相关专业,本科及以上;3年及以上Python开发经验,具备独立设计维护系统的能力。
  2. 爬虫框架:熟练Scrapy、Scrapy_Redis、Selenium、Requests、urllib、lxml、re、XPath、BeautifulSoup。
  3. JS逆向:精通JS逆向,熟练处理JSVMP、AST混淆还原、WASM、加密模块分析;理解HTTP/2、TLS指纹(JA3/JA4)及Cookie/Token机制;具备App/小程序反编译能力。
  4. Web框架:熟练Flask、FastAPI,能独立开发调试RESTful API接口。
  5. 数据库:熟练MySQL、Redis、MongoDB、Elasticsearch,能进行读写与查询优化。
  6. AI能力(加分):熟悉OpenAI/通义千问/智谱等大模型调用,熟悉Embedding向量生成;熟悉Dify/LangChain/Coze智能体平台部署运维;有PDF解析/OCR经验;熟悉ffmpeg、OpenCV音视频处理。
  7. 运维部署:了解常见部署方式,Linux环境优先,熟悉Linux命令与脚本编写测试。
  8. 综合素质:逻辑思维与代码规范意识强,团队协作顺畅,自驱力强、持续学习,AI素养高、主动探索新技术理解业务。

请发邮件到HR-1@fidsy.cn,附上您的简历,并在邮件名中注明您的姓名和应聘岗位