原标题:python爬虫工程师简历

python爬虫工程师个人简历模板范文:求职意向python爬虫工程师 浙江杭州 薪资面议 随时到岗教育背景2020.x -2020x 锤子简历大学 电子信息工程工作经验2020.x -2020x 锤子简历信息技术有限公司 python爬虫工程师
参与公司爬虫所需系统的开发与维护,根据公司需求爬取多个网站的网页数据信息,进行数据提取,去重,清洗,入库等日常工作, 负责分配站点的数据抓取,研究各个站点的反爬规则为其他需要这些数据的公司或公司其他部门提供数据支持,实时监控爬虫的进度和警报反馈。
项目经验2020.x -2020x 二手车信息爬取 python爬虫工程师项目目的:按城市爬取二手车直卖网上的二手车,爬取的数据包括车型名称、报价、新车价格、上牌时间、里程、照片、车源号等 项目描述:1.使用CrawlSpider创建项目 。
2.使用代理ip防止反爬 3.将Network里面返回的response数据保存到本地HTML格式文件中 4.使用re或者Xpath提取想要的相关数据信息,以字典形式进行存储(两种方式我都试过正则相对于简单点)。
5.将爬取下来的内容经过pipelines存储到数据库中(按公司需求)2020.x -2020x 商品综合商场(家用电器) python爬虫工程师商品综合商场(家用电器) 爬取商场中家用电器块的所有商品分类。
项目目的:爬取商场中家用电器块的所有商品分类,爬取数据类型包括电器名称,服务范围,延保服务,营销路径以及商品价格跟好评度等等责任描述:1.使用Scrapy_redis分布式爬虫框架2.采用代理ip池,设置下载延迟等措施提升爬虫效率,防止反爬
3.用xpath对所需要的数据进行筛选提取,及电器名称,服务范围,延保服务,营销路径以及商品价格跟好评度等等4.使用re(正则)对数据进行清洗过滤5.将提取到的数据使用数据库进行数据储存(按公司需求进行操作)
6.一些网页上返回的都是Josn格式数据,比如京东里价格和评论都是动态加载的,需要单独发送请求提取josn格式数据,还要分析下一页的变化规则,直到获取不到页面2020.x -2020x 健康信息数据(药品网站) python爬虫工程师。
健康信息数据(药品网站)项目描述:应客户要求,爬取药品数据(名称,适用范围,参考价以及生产厂家类信息),通过多家网站信息爬取,清洗入库责任描述:1.使用scrapy框架进行数据爬取;2.使用requests进行异步代理ip采集,建立IP池;。
3.使用UA模块随机选取UA伪造请求,提升爬虫效率;4.在items中定义项目所要取的名字;5.使用Xpath对网页上的相关数据进行提取,正则进行数据清洗;6.使用time模块设置定时爬取;7.最后在pipelines中对数据进行处理以及入库(按公司需求);
2020.x -2020x 个人项目 python爬虫工程师爬取自己一系列感兴趣的网站,例如:网易云音乐/妹子图/豆瓣读书(小说)/斗鱼TV(颜值图片)/快代理IP等一系列网站自我评价1.对待新事物有着极大的好奇心 ,喜欢挑战自我,追求想追求的东西;
2.为人诚实守信,性格温和开朗,勤奋稳重,富有幽默感 ,乐于助人, 有很强的团队意识;3.能吃苦;能专,不会的东西我会下很多功夫把它弄懂,能够迅速融入新环境;4.爱交朋友,人品好,人缘好,比较喜欢爱运动,比如爬山,爱健身,休闲时间爱打台球;
5.平时喜欢浏览博客园/开源中国/Github等一系列网站,学习一些相关知识,提升自己的能力水平;6.身体好,能适应公司正常合理的加班要求。

返回搜狐,查看更多责任编辑:
亲爱的读者们,感谢您花时间阅读本文。如果您对本文有任何疑问或建议,请随时联系我。我非常乐意与您交流。
发表评论:
◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。