泉州市 经验: 学历:大专
【职位描述】 1、从web和APP端获取包括图片、文本等相关数据。 2、熟悉分布式爬虫、APP爬虫相关架构，设计爬虫策略和反爬规则。 3、参与业务功能需求探讨，理解系统数据处理流程，提升数据完整度。 【任职要求】 1、熟悉web、app抓取原理及技术，熟悉正则表达式，熟悉常用的爬虫网络框架及重要组件。 2、熟悉Linux开发环境和数据库、熟悉Java、Python、PHP中的一种、熟悉Http协议和REST。 3、有垂直领域数据爬取经验者优先、有反爬虫经验者优先。 4、两年以上的爬虫项目经验。