|
|
| |
| |
职位描述 用小程序查看更多 |
|
【工作内容】: 1、负责设计和开发分布式的网络应用,包括调度、抓取、入库等内容,进行互联网相关信息的抓取和分析。 2、网络设计、功能开发及优化。 3、参与项目整体规划设计过程,制定项目迭代计划。 4、负责解决项目相关的开发需求以及Bug修正,相关的问题的沟通协调工作。 5、根据产品开发进度和任务分配,独立开发相应的软件模块。 6、实时监控进度和警报反馈,持续优化系统提高系统的稳定性。 【岗位要求】: 1、大数据分析、计算机相关专业,具备2年及以上开发项目经验。 2、熟练掌握Python开发语言,熟悉Python的GIL锁原理,理解同步,异步,有多进程、多线程、多协程等并发开发经验(必须)。 3、掌握网络开发原理,熟悉互联网各种类型数据交互模式,能处理需登录网站、动态网页等各种情况下的数据采集方法。 4、熟悉使用主流工具,如Selenium、Requests、Playwright、Uiautomatar2等。 5、熟悉使用抓包工具(如Fiddler)以及常用的浏览器调试技术,了解常见的反爬机制及对应的应对措施。 6、熟悉数据库MySQL、Redis。 7、具备良好的学习能力和技术狂热,愿 |
|
| |
|
|
| |
|