ID:22511
宋冬梅 数据开发工程师 11年经验
2025-04-08
个人介绍:1. 对接运营/产品的需求,快速理解需求,利用SQL进行数据开发,产出报表。 2. 熟练掌握大数据技术的应用,DataX,spark,hive,flink,kafka等。 3. 掌握数据仓库建模和分层,能搭建高质量数据模型。 4. Python处理数据,包含json,excel等。 5. 有一定的SpringBoot开发能力,有UDF函数开发经验。
项目经验:项目描述: (携程大住宿数据分析平台) 数据源为携程海内外各渠道母子酒店的订单信息,对数据进行清洗入仓 之后, 追踪酒店间夜数计算业务指标,并进行可视化报表展示。 项目职责:  数据研发: 计算携程酒店业务指标, 开发极速查询 BI 报表。  基于 Spark(Java)实现随机抽取算法计算指标,并设计 DQC 任务监控数据浮动, 保证数据质量。  基于 Spark Streaming + Redis 生成实时动态黑名单, 并从 Redis 中获取黑名单过滤数据。  将数据写入 StarRocks,根据需求设计 StarRocks 模型,并创建物化视图,索引优化来加快查询。  建立抽象数据模型,并设置人酒权限, 开发 ArtNova BI 报表。  任务优化: 优化批处理和报表任务,保证集群稳定。  对 Spark 进行内存调优(JVM) , 优化占用集群资源多和执行速度慢的 Spark 任务。  对 StarRocks 和 Hive 数据集进行分布式 SQL 调优,加快报表查询速度。 涉及技术: Spark, StarRocks, Hive, Presto, Datax, Redis 项目描述: 为了区分不同的本体关系在计算相似度时的特征,进行相关性分析。为了对海量文本进行自动分 类,结合大数据引擎设计了相似度并行算法,提高计算效率并具有很强扩展性。 项目职责:  相似度算法 (DIF): 基于相关性分析不同语义链接, 设计特征相似度计算方法, 结果准确度达到 94% 。  文本并行算法: 基于 MapReduce 引擎, 设计文本相似度并行算法。  结合 DIF 预先计算本体所有特征间的相似度。  将点对点相似度转化成特征对文本相似度,然后聚合得到文本间相似度,结果计算效率提升 70 倍。 涉及技术: Hive, Hadoop, Sklearn, Spss
技      能: 其他  
¥800 / 8小时
立即预约
ID:22403
黄秀兰 软件开发 6年经验
2025-04-08
个人介绍:精通C语言编程技术,MFC语言以及MATLAB;可熟练运用C语言中的串口、线程、线程锁、动态释放分配内存、缓冲区、文件等操作,能够掌握基本的算法,例如队列、二叉树等;对于MFC能够熟练运用其中的CDC绘图在UI设计上,并且能够掌握其中的各种控件的操作;对于MALAB,可熟练编写各种测试代码,熟练掌握文件操作、图像分析等;并且还能够能够熟练运用Qt编程语言、同样也能够熟练运用Qt中的串口、界面绘图等操作;熟悉了解Javascript语言、python、SDK以及Verilog等语言;有过两年工作经验,有坚实的代码编写基础、曾独立开发过一款Windows软件并且取得软件著作权。
项目经验:一:基于RTKLIB开源软件二次开发,开发出“GNSS精密定位及仿真分析软件”并且取得软件著作权,其中算法修改及测试、UI界面设计及交互、算法梳理以及逻辑梳理等均由个人完成,历时六个月,对于我来说该项目收获最大的就是能够更加熟练的运用线程操作并且掌握了更多的代码编写技巧、增强了代码编写得到严谨性; 二:在团队项目中精度验收测试代码由本人独立攥写并且成功验收; 三:在团队中完成过各种小模块,例如百度地图交互模块、数据统计绘图模块以及协议解析模块;其中百度地图控件交互模块在运用到MFC控件的同时还需要运用到Javascript语言、数据统计绘图模块则需要运用到MFC中的CDC类绘图、协议解析模块则是缓冲区操作中的取帧、读帧、判断帧操作。这些都让我受益匪浅。
技      能: 其他  
¥200 / 8小时
立即预约
ID:22564
陈颖 智能合约工程师 15年经验
2025-04-07
个人介绍:关于智能合约技能树 Solidity + Truffle + VUE + Web3js + Axios 关于传统互联网技术技能树 Python + Django + Redis | MongoDB + Sqlte
项目经验:Formless - 链游聚合平台 - 多节点 访问地址: https://formless.me/ 项目介绍: 链游聚合,NFT发售,NFT二级交易,盲盒等 我的职责: 协同交接维护及升级旧版NFT发售合约 重构Opensea二级交易市场合约 协助联调前端二级市场功能版块 SakuraDefi - 樱花质押挖矿 - BSC节点 访问地址: https://skddefi.com/ 项目介绍: 领取空投,每日签到领取SKD,质押SKD领取USDT,质押USDT挖取奖励 我的职责: 全站落地 UBOXSEA - 国家版权中心(北版)NFT交易市场 - Polygon节点 访问地址: https://uboxsea.io/ 项目介绍: NFT交易市场及版权认证(拥有拍卖功能) 我的职责: 跨部门协同工作安排 合约设计开发, 接口文档梳理及配合前端联调 LEMO - Defi类 - ETH主网 访问地址: https://www.lemobabylon.com 项目介绍: 分别有狸猫、联盟和超级三个节点, 根据Babylon算法拿到其算力然后分发质押奖励 我的职责: 合约设计及开发 接口文档梳理及配合前端联调 合约主网上线部署 服务器环境配置、前端和API接口部署 甲三国 - 盲盒类 - Okex节点 项目介绍: 拥有白蓝紫橙金五个品类的角色, 根据发行比例随机开盲盒抽中对应卡牌, 用户根据卡牌的战力进行Defi挖矿, 其中附简易版NFT交易市场 我的职责: 合约设计及开发, 接口文档梳理及配合前端联调
技      能: 其他  
¥600 / 8小时
立即预约
ID:22402
陆凤兰 爬虫工程师 10年经验
2025-04-07
个人介绍:1. 熟练使用scrapy编写爬虫程序,熟悉国外中大型电商网站海量数据爬取,能够充分利用代 理ip资源进行高效爬取 2. 熟练构建分布式爬虫,增量爬虫、多线程爬虫、Linux下的定时启动爬虫 3. 掌握基本的数据结构与算法 4. 熟悉各个网站常见反爬策略,能根据网页分析出常见反爬手段 5. 熟悉从结构化与非结构化网页中提取所需内容 6. 熟悉html/csss/js,能简单使用bootstrap,vue搭建页面,可以通过前端代码分析目标网站 真实request地址和response内容 7. 熟练使用 PyV8,JS2PY 或直接手写 python 代码去解析 JS 代码 8.熟悉nodejs和puppeteer框架开发 8. 熟悉主流的验证码识别技术(tesseract、selenium+pillow、第三方打码平台)
项目经验:使用技术: 1. 使用Scrapy_Redis搭建分布式爬虫框架 2. 使用 Re+XPath+Jsopath提取数据 3. 使用js2py或者pyv8来执行js相关代码,获取数据。 4. js环境比较复杂,无法完全找到js包,那么可以使用selenium配合浏览器,使用driver执行js代码,获取相关数据 5. 使用 Selenium+Headless Chrome无头浏览器爬取页面数据 6. 使用nodejs实现淘宝的自动登录 7. 使用elasticsearch保存数据 便于搜索查询数据 项目一:淘宝系网站相关爬虫 爬取阿里系的各类商家服务网站的数据,需要商家的账号登录。 项目二:淘宝自动登录 使用puppeteer进行自动登录操作,批量登录淘宝商家账号,并获取淘宝商家后台、直通车、钻展、超级推荐等网站的登录信息,为数据爬取提供支持
技      能: 其他  
¥1100 / 8小时
立即预约
立即预约
意见反馈