IT人力外包人才简历库

返回列表

数据采集与分析工程师

驻场外包人员
工作年限:8年 意向城市:杭州 浏览:3次 发布时间:近期

技能标签

Python开发 分布式爬虫 反爬策略 数据可视化 机器学习 数据库管理 网络协议分析 自动化测试 系统优化 数据建模 爬虫框架 大数据处理 算法实现 API接口开发 日志分析 异常检测

专业技能

精通Python及C语言编程,具备扎实的编码能力。熟练掌握Scrapy、Selenium、PhantomJS、Puppeteer等主流爬虫框架,熟悉分布式爬虫架构设计。擅长反爬策略分析与绕过技术,包括验证码识别、请求头伪装、IP代理池构建等。具备数据清洗、存储及可视化能力,熟练使用MySQL、MongoDB及Tableau。熟悉机器学习算法在数据预测中的应用,掌握时间序列分析和趋势建模技术。

工作履历(脱敏处理)

主导多个行业数据采集项目,包括社交媒体舆情监测、公共卫生数据追踪及人口分布分析。设计分布式爬虫架构提升数据采集效率,采用动态代理和请求头伪装技术突破反爬机制。构建数据清洗管道实现多源数据整合,运用时间序列分析模型预测疫情发展走势。开发自动化交易系统实现基金数据实时监控与趋势预测,优化数据存储方案提升查询性能30%。持续优化爬虫稳定性,将任务失败率控制在5%以下。

项目经验(脱敏处理)

1. 社交媒体舆情分析系统:基于Scrapy-Redis构建分布式爬虫框架,日均采集微博数据50万+条。采用验证码识别服务和IP代理池技术突破平台反爬机制,通过NLP技术提取关键词进行热度分析,成功识别2019-2020年垃圾分类话题的传播规律。

2. 疫情数据监测平台:设计多线程爬虫采集全国疫情数据,结合时间序列分析模型预测感染趋势。通过异常检测算法发现数据波动拐点,为公共卫生决策提供数据支持。

3. 全球人口分布分析:构建分布式爬虫采集多国人口统计数据,使用地理信息系统进行空间分布分析。通过聚类算法验证二八定律,揭示区域人口密度特征。

4. 金融数据智能分析系统:开发基金数据采集模块,集成机器学习模型进行趋势预测。设计自动化交易接口实现基金买卖操作,通过回测验证策略有效性,提升投资决策准确性。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

8年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接