公司名称:深圳市商汤科技有限公司
公司官网: https://www.sensetime.com/ 岗位职责:
1、负责现有爬虫系统的维护改进,核心技术研究、参与架构设计、系统规划;
2、负责爬虫核心算法的策略优化,提升网页抓取的效率和质量;
3、研究各种网页、微信、主流网站接口,实现多通道抓取;
4、反爬策略的设计及优化;
5、优化爬虫数据的存储过程.
任职要求:
1、熟悉 python,有良好的代码风格.熟悉一种 python web 框架.
熟悉 linux 系统的使用.
熟悉计算机网络相关的协议.
了解 mysql 的使用.
有 docker 使用经验者优先.
有分布式爬虫架构经验者优先.
有什么问题可以直接回复,或者邮件联系 aHVzdC4xMTFxcXpAZ21haWwuY29tCg==
招不到人变成大鸡腿.jpg