理聘网-职位详情页，大数据开发工程师

岗位职责： 1、负责大数据平台的架构规划与开发，解决海量数据面临的挑战； 2、管理、优化并维护Hadoop、Spark等集群，保证集群规模持续、稳定； 3、负责HDFS/HBase的功能、性能和扩展，解决并实现业务需求； 4、协助建立数据模型，对数据进行挖掘、优化及统计； 5、对系统存在的问题进行跟踪和定位并及时解决。 任职要求： 1、本科及以上学历，大数据、软件工程等计算机相关专业； 2、3年及以上大数据架构工作经验优先，中级工程师以上优先； 3、善于用户分析，有一定的数据分析能力，有PB级数据处理经验； 4、熟悉Spark的计算框架的基本原理，能基于Spark sql、DataFrame\Dataset、RDD进行数据统计分析程序的开发； 5、具备优秀的团队意识和沟通能力，学习能力和主动性强，具有钻研精神，充满激情，乐于接受挑战。