ID:22786
陈阳 程序猿 3年经验
2024-12-18
个人介绍:拥有超过12年的软件和网页应用程序开发经验,我精通多种编程语言,包括Python、C++和PHP。我的专业领域涵盖了前端和后端技术,包括HTML、CSS、JavaScript等。通过这些年的不断学习和实践,我已经成功地开发了各种各样的应用,从小型网站到复杂的软件和移动应用。我热衷于解决技术难题,提供创新的解决方案,并确保项目的高质量和可靠性。擅长c++、python、php、html/js/css、逆向,app(uniapp),熟悉常用的库以及框架。并且有开发相关案例,有12年开发经验。
项目经验:"多语言智能应用平台" - 一个支持Python、C++、PHP等多种语言的智能应用平台。 "跨平台移动APP魔法匠" - 开发适用于多个平台的魔法般的移动应用程序。 "高性能数据分析工具" - 用于Python和C++的高性能数据分析和处理工具。 "创新的PHP网络解决方案" - 基于PHP的创新网络应用程序开发和解决方案。 "智能UI/UX设计助手" - 基于HTML/CSS/JS技术的智能用户界面和用户体验设计工具。 "多语言代码质量监管器" - 用于多语言代码的质量监管和改进。 "全球软件部署自动化" - 用于自动化软件部署和管理的全球解决方案。 "分布式系统架构师" - 为复杂的分布式系统设计和优化架构。 "智能AI助手集成器" - 集成多种AI技术的智能助手应用程序。
技      能: 其他  
¥1200 / 8小时
立即预约
ID:22796
刘娜 RPA开发工程师 3年经验
2024-11-23
个人介绍:Python基础扎实 ,拥有良好的编码习惯; 掌握 Django 框架 ,flask框架 ,可以基于 MVC 进行 Python 开发; 熟练使用 numpy ,pandas模块进行数据分析,使用matplotlib,echarts可视化; 熟练使用Hua Wei AntRobot RPA工具进行机器人流程自动化开发;
项目经验:(1)项目:自动化商品信息解压提取工具 ·项目描述:批量解压大量不同客户的产品信息压缩包并筛选提取出符合要求的doc文件中的指定内容并且按照解压的文件名,提取项名称,doc文件名,客户批次号作为表头生成excel。 ·技术架构:bottle+celery+pandas+oracle+poetry ·负责职能: ①使用bottle框架实现mvc模式开发形成需要的不同接口 ②使用celery实现调用解析文档的接口的分布式操作 ③使用pandas 将所需要的各项数据进行整理生成excel ④使用oracle对客户的商品信息进行储存 ⑤使用poetry 建立稳定的Python虚拟环境 (2)项目:某大型公司某国考勤自动跟催RPA工具(涉及到公司保密协议,不便告知业务名) ·项目描述:自动下载某国指定考勤系统网站的当月考勤数据并做处理后,形成excel文件并发送给相应业务负责人。 ·技术架构:Hua Wei AntRobot+pandas+requests+openpyxl ·负责职能: ①使用Hua Wei AntRobot框架实现机器人流程自动化开发 ②使用pandas实现对下载的考勤报表数据进行加工和处理形成结果excel ③使用requests请求公司的综合网站通过公司员工的id号获取邮箱 ④使用openpyxl对Excel进行格式设置
技      能: 其他  
¥1300 / 8小时
立即预约
ID:22750
司浩 爬虫工程师 15年经验
2024-11-20
个人介绍:1. 熟练使用 Python 语言和常见的第三方库;有良好的代码风格及编程能力 2. 熟悉使用正则表达式、Xpath 和 BeautifulSoup 等相关网页提取技术 3. 熟悉 Scrapy 框架的使用,同时有过 Scrapy-redis 分布式爬虫经验 4. 熟悉 Fiddler、AirtextIDE 等 app 爬虫工具 5. 熟悉 MySQL、redis 等数据库 6. .熟悉常见的反爬机制,如验证码识别、IP 封禁、UA 监测和 cookie 认证等;了解加密数据的处理 7. 了解 web 框架 Django 和 Flask 8. 了解多进程多线程和协程的相关使用 9. 了解代码管理工具 git 10. 了解多进程多线程和协程的相关使用 11. 了解前端 HTML,CSS,JS,AJAX 等相关前端知识 12. 了解 Linux 操作系统,熟悉其基本操作 13. 了解数据清洗,能够使用 NumPy、Pandas 等工具进行数据处理
项目经验:航空机票信息查询 项目描述: 应客户需求,对某国外航空公司网站进行机票信息爬取,然后把数据交给用户,供用户平台使用。 责任描述: 使用 Scrapy 框架,主要进行页面分析、 数据采集、数据清洗、数据保存等处理 1. 登录验证码的处理-该网站验证码比较简单,采用 Scrapy 自带的验证码处理模块 2. 由于只能使用国外 IP,使用代理 IP,并添加 user-agent 和延时规避反爬 3. 使用 Xpath、正则和 lxml 的 etree 模块进行页面解析与数据提取 4. 使用 Mongodb 数据库保存爬取数据
技      能: 其他  
¥200 / 8小时
立即预约
ID:22508
王小红 大数据开发工程师 10年经验
2024-07-25
个人介绍:掌握Linux 基础操作命令,能够编写简单的 Shell 脚本 熟练Mysql,Oracle等主流数据库,能够基于MySQL等数据处理引擎进行数据开发 熟悉Hadoop组件的Hdfs读写流程、MapReduce计算流程、Yarn资源调度 掌握Hive窗口函数及内置函数的使用,能够基于Hive进行数据开发 熟悉Flink流计算框架,有过实时项目经验熟悉Flink内部运行机制 熟悉Spark架构的执行流程以及工作原理,以及RDD之间的依赖和Spark的容错机制 熟悉Hbase架构原理及读写流程、rowkey设计原则、Hbase性能优化 掌握Kafka基本原理,使用Kafka消息中间件存储并消费数据 熟悉使用Flume完成日志采集,使用Sqoop完成义务数据的导入 熟练使用阿里数据中台DataWorks DI、DataHub等数据接入组件 熟练Azkaban、sqoop、dataX等开源的ETL调度、同步工具 熟悉Clickhouse、Kylin、Presto等OLAP引擎的原理以及源码 熟练使用FineBI、Sugar等可视化报表组件 熟悉数据仓库建设和维度建模,有较丰富的离线或实时数仓建设和数据 ETL 设计开发的经验
项目经验:通过Flume程序实时监控采集商城日志数据文件,实时采集到kafka作为原始日志数据 使用FlinkCDC实时迁移Mysql中的用户行为数据存到kafka中构建ods层 调用重分区算子,rescale,rebalance,shuffle解决kafka的topic分区之间数据不均匀,防止数据倾斜 负责构建dwd层通过Flink应用程序使用操作符对ods层数据进行清洗,过滤等操作 使用redis作为热点数据的旁路缓存,使用Flink的异步IO实现对外部系统的异步访问,提高程序性能 构建DWS宽表:通过预加载,双流join,lookupjoin实现维度关联,将宽表数据存入Clickhouse 使用异步IO实现连续发送多个请求,提高并发效果,减少多请求等待带来的消耗 通过ReplacingMergeTree保证最终一致性,查询时的sql语法加上去重逻辑,保证ClickHouse的一致性 利用web ui定位,查看火焰图平顶,并分析GC日志,调整资源解决Flink反压 ADS层指标:产品总数,上架商品的sku/spu数,交易成功指标数,浏览下单数,支付买家数等 使用DataV调用接口进行可视化报表展示 参与将项目部署到Flink on Yarn,通过WebUI查看资源使用,以提高集群的资源利用率 负责阿里云离线项目的整体架构设计和实施,包括技术选型、系统数据流程设计等 使用Flume等日志采集工具进行日志采集和聚合 利用MaxCompute等大数据计算框架进行数据处理和分析,为项目提供数据支持 使用Quick BI、DataV等工具进行数据可视化展示,为项目提供直观的数据视图 负责数据的安全性和隔离性,采取必要的措施防止数据异常和敏感数据泄露 设置定时调度任务,对项目进行监控和管理,确保项目的正常运行
技      能: 其他  
¥1400 / 8小时
立即预约
立即预约
意见反馈