python工程师

岗位职责：一、负责公司内部平台功能的实现和业务开发。二、负责相应系统、模块的开发工作，包括需求分析、接口设计、数据设计、测试、性能优化等三、负责多个垂直频道的数据抓取工作、研究各种网站、网页、链接的形态，发现它们的特点和规律；四、网络爬虫工具的设计、开发及优化；岗位要求：一、2年以上开发经验，能熟练使用Python语言进行日常开发工作。二、熟悉互联爬虫原理，能熟练使用Scrapy等开源爬虫框架的一种。三、具有较强的沟通能力，分析和解决问题的能力，具备良好的团队合作精神和服务意识。四、熟悉urllib2、urllib3、requests等多种库的使用。五、熟悉常用设计模式，一定的算法与逻辑思维能力。六、理解http，熟悉html, DOM, xpath, scrapy等，精通网页抓取原理及技术、正则表达式，能从结构化的和非结构化的数据中获取信息；七、精通Python、Java、C++任一语言和数据结构，编码基本功扎实。八、对反爬机制有较强的应对能力,熟练使用fiddler,wireshark,科来等抓包工具。