Python工程师
岗位信息
| 招聘单位 | 麦芽传媒 |
|---|---|
| 工作地点 | 重庆 |
| 官方更新时间 | 2023-12-11 10:58:18 |
职位描述
职位描述:
负责网络爬虫系统平台的架构设计与开发(如抓取调度,多样化抓取,页面解析和结构化抽取)、技术选型;
研究爬虫策略和防屏蔽规则,解决封账号、封IP、验证码、混淆加密,算法还原,so层,页面跳转等难点攻克,提升网页抓取的效率和质量;
对抓取后的数据进行清洗、存储等,并持续优化平台,以便满足各种爬取业务需求。
负责企微自动化运营工具开发以及维护工作。
任职要求
任职要求:
熟练掌握Python语言进行开发。
3-5年工作经验,有过自动化相关工作,熟悉C/C++更好。
熟悉自动化测试的工具和框架,如selenium、Xpath、pywinauto、Windows UIA。
熟悉linux和windows开发环境。
熟悉至少一种 Python Web 开发框架,如 Django、Flask、FastAPI 或 Sanic
能够快速学习和掌握新知识,有较强的分析和解决问题的能力。
熟练掌握正则表达式、XPath、CSS等网页信息抽取技术;
熟悉常见反爬机制,验证码识别,IP代理池、应用Ip池、headers认证和cookie等;
熟练掌握应用Selenium、PhantomJS、Splash、Puppeteer实施动态抓取;
提示:投递请认准招聘单位官方招聘官网,谨防中介收费。