python后端工程师 数据爬虫

大数据挖掘分析平台和产品的建设。

工作职责:

  1. 独立完成软件系统代码的设计与实现;

  2. 根据需求完成设计,代码编写,调试,测试和维护;

  3. 使用Python 语言对后台业务逻辑进行开发以及维护;

  4. 能根据实际需求,利用前沿第三方框架,如 Django、Flask等,实现各种功能。

职位要求:

  1. 能够在 Unix/Linux进行服务器的开发;

  2. 精通Python语言;

  3. 精通MySQL/PostgreSQL数据库;

  4. 具有良好的沟通能力、团队合作精神、优秀的分析问题和解决问题的能力。

优先条件:

  1. 熟悉PEP8编程规范;
    
  2. 熟悉网页爬取/数据挖掘/数学建模/算法,熟悉Scrapy等相应的开源组件;
    

有良好的设计能力,熟悉常用的设计模式和设计原则。

1、参与爬虫系统的数据抓取架构设计与开发;
2、负责网页信息抽取、数据清洗等研发和优化工作;
3、参与爬虫核心算法的策略优化研究,提升网页抓取的效率和质量。

任职要求:
1、工作认真细致踏实,学习能力强,以解决技术难题为乐趣,有想法,敢于挑战;
2、熟练使用Python编程语言;
3、有网络爬虫、网页去重、网页信息抽取等相关经验者优先;
4、精通Mysql数据库开发,有对复杂Sql语句和存储过程等的开发与优化经验,有大数据量、高并发访问处理经验尤佳;
5、有大数据领域工作经验者优先。

原文地址:https://www.cnblogs.com/ITniu/p/5779934.html