职位描述
1、负责智能化数据处理平台的规划和架构工作,主导系统的架构设计和核心模块开发,确保项目质量和关键性能指标达成;
2、负责研发技术发展方向,新技术领域的探索,将新技术应用到公司的数据产品上;
3、根据现状制定总体的数据治理方案,包括数据采集、接入、开发标准和规范,制定全链路数据治理方案;深入理解公司数据业务,超强的数据业务感知力,挖掘数据价值,推动数据变现场景的落地,为业务赋能;
4、负责平台数据仓库的建模和设计工作,数据抽取,数据清洗,数据建模工作, ETL设计与开发,数据质量保障,元数据管理,指标体系建立;
5、参与公司中长期数据产品的规划和设计,需求分析,数据产品开发及落地,保障产品质量。
职位要求
1、计算机相关专业本科以上学历,5年以上研发经验;
2、4年以上系统建设,设计,架构经验;3年以上大数据系统开发,设计,架构经验;
3、精通Java语言,对io、多线程等基础框架有深入理解,有丰富的底层架构能力,能胜任项目中技术难点攻关;
4、熟悉微服务架构,分布式熟悉(spring cloud ,spring boot);
5、熟悉商业智能系统,熟悉数据仓库,熟悉数据集市;
6、熟悉大数据相关技术:Hadoop, Hive, HBase, ZooKeeper, Spark, Cassandra, MapReduce;并阅读过相关源码;
7、熟悉常用机器学习算法,了解深度学习,强化学习,迁移学习算法,了解相关原理(FF, BF, SGD等);
8、熟悉机器学习框架或工具(Spark MLLib,tensorflow, caffe等),了解源码并能应用项目;
9、具备大数据云平台、计算存储平台、可视化开发平台经验,具备中大型成功项目经验优先;具备大规模分布式计算平台的使用和并行算法的开发经验,对大数据处理及应用有浓厚兴趣;
10、了解软件项目管理、敏捷管理方法论,在中大型项目中有所实践。
