ID:22608
潘梅 其他 15年经验
2025-06-14
个人介绍:熟悉多线程多进程分布式等,对爬虫任务调度有很好的解决办法采集数据频率高,数据量大,范围广,能做深度抓取。爬虫遇到性能瓶颈,如何分析瓶颈并解决。熟悉并能解决常见的反爬措施,比如常见的图片验证,滑动验证,拼图,短信验证等。常见的封IP,封header等。比如给爬虫投毒喂假数据如何识别。熟悉数据结构和算法,拿到数据可以进行一些基础的清洗,比如如何在内存容量有限的情况下清洗亿万数据;比如如何从提取目标数据等。甚至可以做一些舆情分析,数据分析等。熟悉常用的数据库和nosql数据库,对数据存储有一定见解,如何设计数据库和表结构等,数据库优化等。
项目经验:熟悉多线程多进程分布式等,对爬虫任务调度有很好的解决办法采集数据频率高,数据量大,范围广,能做深度抓取。爬虫遇到性能瓶颈,如何分析瓶颈并解决。熟悉并能解决常见的反爬措施,比如常见的图片验证,滑动验证,拼图,短信验证等。常见的封IP,封header等。比如给爬虫投毒喂假数据如何识别。熟悉数据结构和算法,拿到数据可以进行一些基础的清洗,比如如何在内存容量有限的情况下清洗亿万数据;比如如何从提取目标数据等。甚至可以做一些舆情分析,数据分析等。熟悉常用的数据库和nosql数据库,对数据存储有一定见解,如何设计数据库和表结构等,数据库优化等。
技      能: 其他  
¥200 / 8小时
立即预约
ID:22531
魏桂兰 官网后期维护 14年经验
2025-06-14
个人介绍:我熟练掌握Python编程语言,具备数据分析、机器学习、Web开发等技能。熟练使用NumPy、Pandas、Scikit-learn等库,熟悉Django、Flask等框架。具备快速解决实际问题的能力,擅长数据处理和数据可视化。 熟悉常用的操作系统,如Windows、Linux和Mac OS等,了解它们的基本概念和命令。 了解网络的基本概念,包括TCP/IP协议、HTTP协议等,熟悉常用的网络设备和网络服务。 了解常见的软件架构设计模式,如MVC、MVVM、微服务等,并能够根据实际情况选择合适的架构。 熟悉常用的开发工具,如集成开发环境(IDE)、版本控制系统(如Git)、调试工具等。 了解数据库的基本概念,包括如何设计、查询和管理数据库。
项目经验:参与过美国大学生建模大赛,并且取得优秀成绩 接过网络爬虫的程序外包 参与大学学校官网的维护工作,和后期的维护以及升级,参与设计了学校门口的人脸识别的系统,并且进行大规模的使用投入。 负责开发并维护后端服务。掌握了Django和Flask等框架,具备数据库设计和优化经验。此外,我还参与了多个数据分析项目,使用Pandas等库处理大量数据,并通过可视化手段呈现分析结果。在工作中,我注重团队协作,积极沟通解决问题,不断提升自己的技术水平。
技      能: 其他  
¥500 / 8小时
立即预约
立即预约
意见反馈