求职意向/JobIntension

  • 到岗时间:随时
  • 食宿要求:
  • 待遇要求:10000以上
  • 求职类型:全职
  • 工作地区:广东 , 广州番禺
  • 意向岗位:
  • 其它要求:
  • 发展方向:

网络数据采集方向、.net/C#、Python爬虫开发

工作经历/Experience

  • 广州*********公司  
  • 2016年11月-2018年11月
  • 任职:爬虫开发工程师

主要工作任务为通过技术手段进行对各大航空公司网站提供的特价机票进行抓取、压位,(类似黄牛)工作中遇到最大的难点基本是js加密技术、验证码等,目前以阿里滑动验证码难度系数最为高,为解决该问题,我曾试过以js模拟形式进行拖拽完成验证,但因阿里滑动验证依托大数据进行过程预测,故该版本没运行几天就没作用了,后来改用webdriver调用chrome进行模拟,同样好景不长,很快驱动也被检测了,在通过反编译技术针对chromedriver做一系列修改后运行了很长一段时间,当然就像前面一样很快又被阿里检测,最终的解决方案就是定制开发一款适合自己的chromium,针对网站检测项目做一个随机返回功能,让网站认为它是一个全新的用户。 在日常的开发作业中公司主要开发语言为c#,常用的语言有:cpp、js、以及python等,日常工作基本上就是攻克js加密问题!

  • 东莞*********公司  
  • 2014年09月-2016年10月
  • 任职:爬虫开发工程师

主要工作内容为通过技术手段对各大航空公司网站进行实时监控并获取其数据、进行机票占位(类似黄牛);工作中主要开发语言为C#+python;其中C#用得较多,偶尔需要基于Winform界面开发(仅为了演示)工作中使用的数据库为Mysql+redis,项目均采用多线程并发技术运行,亦在多台设备上通过分布式进行数据抓取!

教育背景/Education

  • 陈文卫培训机构
  • 2011年01月-2012年01月
  • 平面设计

主要学习的是三个平面软件,涉及到广告平面设计、UI包装设计、网页平面设计、卡片设计等相关内容

  • 广东科学技术职业学院
  • 2016年03月-2017年01月
  • 计算机网络

语言能力/Language

  • 粤语
  • 精通

  • 普通话
  • 精通

培训经历/TrainingRecord

  • 职坐标
  • 2016年11月-2018年11月

从零基础开始深度学习java知识,并快速上手产品开发、设计

  • 陈文卫培训机构
  • 2012年07月-2013年12月
  • 平面设计实超证

由浅到深地学习平面设计,我们主要学习平面的三大软件:PS、AI、CDR其中PS与CDR因使用较多,所以比较熟练,但AI也不会太陌生,通过培训我掌握了计算机的基础知识,也因此展开了我的计算机生涯,所以很感谢这个培训机构,当然,我现在依旧还在就读其它专业!

自我评价/SelfDescription

本人有四年爬虫开发经验,有航司网站、Facebook、租房信息、企业信息、社交信息、微信公众号文章、微博信息以及电商平台信息获取的经验,熟悉基于selenium的分布式自动化测试(自写框架),有分布式爬虫开发经验,同时也能应对反爬策略,我责任心较强,喜欢钻研新技术,坚信技术可改变世界的理念!