ID:22426
姜斌 业余工程师 9年经验
2025-05-26
个人介绍:作为一名爬虫和测试方面的技术顾问,我具备以下技术能力: 1. Python爬虫技术:熟练掌握Python编程语言,能够使用Python编写高效的爬虫程序,实现网页数据的抓取、解析和存储。具备对网页结构和数据抓取规则的深入理解,能够应对各种复杂的网站结构和反爬机制。 2.数据处理和分析:具备数据处理和分析的能力,能够对爬取的数据进行清洗、转换和分析,提取有用的信息并进行可视化展示,为业务决策提供支持。 3.测试技术:熟悉各种测试方法和工具,包括自动化测试、性能测试、安全测试等。能够设计和执行全面的测试计划,发现并解决系统中的缺陷和问题。 4.数据库和存储技术:具备数据库设计和管理的能力,熟练使用各种数据库系统,包括关系型数据库和mysql数据库,能够为爬虫程序和测试系统提供稳定高效的数据存储方案。 总之,我作为一名爬虫和测试方面的技术顾问,具备广泛的技术知识和丰富的实战经验,能够为客户提供全面的技术支持和解决方案。
项目经验:在我的项目经验中,我曾经开发过一个基于Python的12306抢票项目,该项目利用12306的API接口和自动化工具,实现了自动查询和抢票功能,提高了抢票的成功率和效率。同时,我还用python开发了一个基于Socket的卓面监视程序,用于监控网络数据流量和实时数据传输,保证了系统的稳定性和安全性。这些项目经验让我具备了丰富的Python编程和网络通信方面的技能,能够独立完成复杂的项目开发和系统监控任务。
技      能: 其他  
¥200 / 8小时
立即预约
ID:22457
曹军 IT主管 11年经验
2025-05-26
个人介绍:1. 维护服务器应用系统及软件开发环境构建,如 AD域、Exchange、Android 编译、MES 生产系统、AWS 、阿里云、Azure等 2. 维护核心网络架构规划部署及设备安装调试 3. 部署IT 项目及信息安全类问题点处理 4. IT 管理类文件编写及更新、主导企业27001体系认证并通过,编写全面体系文件并实时更新受 控。 5. 服务器虚拟化(Vcenter+Vsphere+Esxi )系统的运维,以及 KVM、Docker 环境运维 6. 维护集团所有的 oracle、mysql、sqlserver 数据库的安全备份及 dba 分析工作 7. 各厂商存储系统的维护及数据安全工作 8. 精通 ubuntu 、redhat、centos 等发行版 linux 系统,运维经验10+年时间 9. 精通 shell、python 语言编程,对运维脚本的编写及系统对接 API 工具的编写 10. 精通华为S57/S77/S93系列三层网络交换机配置及部署(堆叠+聚合+冗余+ACL +流策略等) 11. 部署架构企业 AC+AP 无线覆盖项目 12. 部署架构企业 devops 高可用开发平台k8s架构管理 13. 熟悉深信服厂家系统产品(防火墙、上网行为管理、零信任、态势感知)及其他厂家的安全产品 (堡垒机、日志审计、邮件系统+归档、OPS 维护) 14. 熟悉 ISO 9000/14000/27001、两化融合、AEO 等体系、曾多次参加外部知名厂商对企业的信息安全审计工作 15. 产品(防火墙、邮件系统、VPN 、反垃圾产品)维护开发(LINUX 系统) 16. 系统开发 (产品功能、内核优化、性能提升) 17. 虚拟化应用开发(KVM Vmware 企业平台) 18 iptables+mysql+... 、postfix+dovecot+mysql+dspam+...、openvpn+mysql+...等架构的二次开发 19. 防火墙系统开发(linux 裁剪、内核定制、程序加密、安装定制...) 20. 精通 Bash、Python 编程 21. 精通 Apache/Nginx/Lighttpd等 web 架构
项目经验:github开源项目(Python) 运维工程师 基于个人兴趣及工作需要对下面项目进行开发及适配调试: 1. lnmVPN 项目:实现跨区 VPN 组网,包括移动端、PC端、网对网组网模式,实现互联互通 2. lnmOPS 项目: 构建企业 OPS 运维系统,支持资产管理、API 对接、统一任务调度、数据管理 3. lnmFTP 项目: 支持 FTP 文件传输+web 文件分享+超量数据管理 4. lnmDNS 项目: 支持 DNS 运营商智能解析、自定义解析及高并发QPS 泛微oa项目上线 运维工程师 1. 项目前期调研、数据分析整理及服务商前期沟通 2. 流程协调实施对接、API的接口转换及与其他系统(加密系统、ERP、MES)数据对接 3. 服务日志分析+日常运维管理(补丁升级、异常错误对接、数据分析) 4. 数据库管理(oracle+DG+rman+expdp) 5. 安全事件处置(弱点分析+0day跟踪) 6. 用户异常问题点反馈及跟踪处置 emc存储 网络安全 1. 深信服 NGFW 下一代防火墙项目前期调研、评估、测试、上线 2. 深信服 AC 上网行为管理项目前期调研、评估、测试、上线 3. 360终端安全设备项目前期调研、评估、测试、上线 4. 2016惠州园区网络建设 5. EMC UnitXT480 SC7020/4020存储冗余方案评估上线及运维 项目职责 对项目全阶段完全负责,调研、评估、测试、上线、运维 防火墙系统 1. 基于 ipset+iptables+DPI 模块防火墙开发 2. 基于 Postfix+Python+webmail+Dovecot+SPAM 模块邮件系统开发 3. 基于 OpenVPN/OCserv+Anyconnect 组件 VPN 系统开发
技      能: 其他  
¥1100 / 8小时
立即预约
ID:22802
马淑英 测试工程师 12年经验
2025-05-25
个人介绍:熟练掌握测试理论和测试流程并用到测试中,提取测试功能点,制订合理的测试计划 熟练使用禅道,掌握测试流程,对缺陷进行管理和跟踪 熟练使用fiddler、postomen进行抓包和接口测试 熟练掌握mysql数据库的使用,Navicat进行增删改查 了解xshell的基本使用,能够通过其查看项目日志 能够通过badboy录制脚本,并结合jmeter进行性能测试 了解python+selenuium+unitest框架 能够正确输出测试文档
项目经验:项目描述: 中台是一个前台作战单元和后台资源部门之间的组织模块,主要功能有:拍照测评、用户画像等 拍照测评:主要有实时测评及批量测评。 用户画像:根据用户属性及行为,定义用户标签,通过用户标签,给对应用户推送微信消息 项目职责: 1.熟悉产品需求,参加需求评审,与产品、开发沟通需求,讨论测试方法 2.根据产品需求使用xmind编写测试需求导图和测试要点,提前预知流程问题,同产品协商讨论 3.根据产品原型及需求文档,编写功能测试用例,开展测试用例评审,修改并完善测试用例 4.使用mysql数据库筛选对应画像的用户 5.通过内网穿透的方法,进行测试环境推送微信消息 6.使用postman进行接口测试,模拟微信发送推文消息 7.使用badboy+jmeter对测评接口进行压力测试 7.使用bug管理工具禅道进行bug提交和跟踪 8.上线后跟踪线上数据,进行线上验收 9.编写和提交测试报告 项目描述: 产品信息管理系统是一个维护公司电商产品的管理平台,有web端、小程序端、h5端,不同客户端的功能也不相同。 web端主要负责产品平台、类目的维护,管理员账号管理、角色配置,采购单管理,供应商维护; 小程序端主要是供应商使用,主要功能有供应商入驻、接单、采购状态更新、采购单发货、新品推介等; h5端主要功能有产品信息查看、修改,质检信息上传 项目职责: 1.熟悉产品需求,参加需求及UI评审,与产品、设计沟通需求,提高前期的工作效率 2.根据产品需求使用xmind编写测试需求导图和测试要点,提前预知流程问题,同产品协商讨论 3.根据产品原型及需求文档,编写功能测试用例,开展测试用例评审,修改并完善测试用例 4.使用bug管理工具禅道进行bug提交和跟踪 5.使用postman进行接口测试,fiddler进行小程序抓包 6.上线后跟踪线上数据,进行线上验收 7.编写和提交测试报告 8.上线后给相关人员进行使用培训,根据运营要求通过mysql导出数据报表
技      能: 其他  
¥300 / 8小时
立即预约
ID:22410
陈欣 数据采集工程师助理 9年经验
2025-05-25
个人介绍:1、基本的编码基础(python) 对于任何编程工作来说都是必须的。数据名字和值得对应(字典),对一些url进行处理(列表)等等。掌握牢固。熟悉python编程语言,熟悉相关的框架和库。我主要用Python写爬虫。 2、任务队列。 当爬虫任务很大的时候,写一个程序跑下来是不合适的: 所以我们需要一种任务队列,它的作用是:讲计划抓取的网页都放到任务队列里面去。然后从队列中拿出来一个一个执行,如果一个失败,记录一下,然后执行下一个。这样就可以一个接一个地执行下去。也增加了扩展性,几亿个任务放在队列里也没问题,有需要可以增加worker,就像多一双亏筷子吃饭一样。 3、数据库 数据保存肯定要会数据库的。不过有时候一些小数据也可以保存成json等。我有时想抓一些图片就直接按照文件夹保存文件。推荐使用NoSQL的数据库,比如mongodb,因为爬虫抓到的数据一般是都字段-值得对应,有些字段有的网站有有的网站没有,mongo在这方面比较灵活,况且爬虫爬到的数据关系非常非常弱,很少会用到表与表的关系。 4、HTTP知识 HTTP知识是必备技能。因为要爬的是网页,所以必须要了解网页。首先html文档的解析方法要懂,比如子节点父节点,属性这些。我们看到的网页是五彩斑斓的,只不过是被浏览器处理了而已,原始的网页是由很多标签组成的。处理最好使用html的解析器,如果自己用正则匹配的话坑会很多。 5、运维 实际工作中运维和开发的时间差不多甚至更多一些。维护已经在工作的爬虫是一个繁重的工作。随着工作时间增加,一般我们都会学着让写出来的爬虫更好维护一些。
项目经验:爬百度贴吧的评论 爬京东的商品名和价格包括图片评论,保存到excel 爬取豆瓣电影的评分,详细介绍报保存成文件 爬取斗图网的图片保存文件
技      能: 其他  
¥1500 / 8小时
立即预约
ID:22561
白飞 架构师 15年经验
2025-05-25
个人介绍:※有较强的研究分析、总结能力;较强的文章撰写能力;并且对新技术兴趣浓烈,善于处理解决问题,成熟稳重,责任感强。 ※具有扎实的Java基础以及面向对象编程思想,熟悉常用的设计模式、Linux常用命令以及服务配置,熟练使用Shell脚本,熟练※使用Maven、Svn,Git等版本管理工具 ※语言:java,.net,python,golang ※技术:spring boot,spring cloud 基于spring cloud 开发的微服务平台,其他略 ※容器:docker,docker swarm,k8s,gitlab CICD,容器化部署,容器编排承载100+微服务全生产环境持续集成搭建、管※理、运维、监控日志分析等。具有容器开发,中间件开发经验。 ※中间件:MQ,redis,zk,es,solr等,在业务上广泛应用。 ※数据库: sql server,mysql,oracle ※存储:glasterfs,NFS,fastdfs ※互联网技术:100万并发,互联网架构等 ※开发过的项目:新媒体平台,宣传指挥调度,采编联动平台,爬虫系统,SOA平台,微服务项目,SSO,智能机器人项目等 ※熟练使用常用服务器Tomcat、jetty、Apache、Nginx并能进行调优配置、搭建正向代理、反射代理、动静分离、负载均衡策略 ※熟悉应用压力测试、安全测试、渗透测试、回归测试等测试场景以及等保、分保相关标准并根据要求改造应用 ※具备较好的团队领导能力,有良好的沟通与团队合作技巧,能适应较大的工作压力,有较强的分析解决问题的能力,熟练使用visio、project、xmind等工具 ※熟悉Html、CSS、Javascript、Jquery、JqueryUI、EasyUI、Bootstrap,vue.js等前端技能.
项目经验:项目描述: “绿色国网”将作为国家电网公司综合能源服务主入口,对接省级智慧能源服务平台,集成智慧车联网、国网商城、分布式光伏云网、供应链金融服务系统等平台的相关应用和数据,围绕产品服务、交易撮合、信息资讯、创新孵化、产业联盟、服务云市场等服务,为综合能源服务相关主体引流赋能,为用户提供全方位的能源服务,同时对产业链上下游各方面资源进行有效汇聚,促进全社会清洁能源消纳,支撑综合能源生态圈建设。 个人职责: 担任项目架构师,负责需求文档、概要设计、技术方案、集成方案的设计和编写;负责项目架构设计规划、负责指导技术方案落地、负责大数据业务开发设计… 同类项目: 网上国网
技      能: 其他  
¥900 / 8小时
立即预约
立即预约
意见反馈