理聘网-职位详情页，大数据开发工程师（杭州市数据要素创新中心有限公司）

任职要求： 年龄 40周岁及以下 学历要求 硕士研究生及以上 岗位职责 1.负责日常离线与实时数据任务开发，含数据采集、清洗、存储、计算、可视化等 全链路工作;2.负责日常基础运维工作，解决数据倾斜、资源调度优化、存储优化等问题:3.参与数据需求设计评审，与业务、运营等部门协作，支持BI报表、用户画像、推荐系统等业务场景数据需求; 4.跟踪业界前沿技术并应用到实际项目中，负责部门的技能传递与培训;5.高效对接各业务部门及上下游系统团队，推动数据产品与业务目标的高度契合6.完成领导交办的其他工作。 任职资格 1.数学、统计学、计算机、信息技术等相关专业背景:2.3年以上大数据开发类工作经验，逻辑能力强，对数据有浓厚兴趣:3.了解分布式计算的基本原理和实现方式，熟悉并掌握数据的存储和管理，熟悉并掌握常见的大数据框架，如Hadoop、Spark、Storm、Katka等;4.具备扎实的大数据流式处理经验，如Flink、Katka、Spark等流式大数据计算及运维经验; 5.具有良好的沟通能力、逻辑分析能力，具备团队精神、责任感强，服务意识强;6.有大数据平台搭建工作经验者优先。 研究方向： 数学、统计学、计算机、信息技术等相关专业背景