技能标签
专业技能
精通Python编程语言,熟练掌握Requests/Selenium/Scrapy等爬虫框架,精通Pandas数据处理与清洗技术,熟悉Echarts/Streamlit等可视化工具,具备数据中台架构设计能力,熟练使用SQL进行数据建模与分析,持有影刀RPA高级认证,熟悉Flask/Django等后端开发框架
工作履历(脱敏处理)
专注于数据采集与可视化领域,主导构建分布式爬虫系统,支持多源数据采集与实时更新。设计并实施数据中台架构,实现数据标准化处理与多维度分析。开发自动化数据处理流水线,通过Pandas实现复杂数据清洗逻辑,提升数据质量。搭建可视化平台,基于Streamlit与Echarts构建交互式数据看板,支持多级权限管理与外部访问。优化数据处理流程,使数据采集效率提升40%,可视化平台使用率提升65%。持续迭代RPA流程,实现数据采集自动化率100%。
项目经验(脱敏处理)
1. 构建分布式爬虫系统:采用Scrapy-Redis实现多节点分布式爬取,支持动态渲染页面数据采集,解决反爬虫策略,日均采集数据量达50万条。2. 数据中台架构设计:基于Hadoop生态搭建数据中台,设计ETL流程实现数据标准化,建立统一数据仓库模型。3. 可视化平台开发:使用Streamlit搭建数据看板框架,集成Echarts实现动态图表展示,支持RBAC权限控制与跨域访问。4. 电商数据智能分析:开发数据处理Pipeline,通过Pandas实现多维度数据聚合分析,输出销售趋势、广告ROI等核心指标。5. RPA自动化流程:利用影刀RPA实现数据采集自动化,减少人工干预,提升数据处理效率300%。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
3年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接