人才网
网优一下
热门职位:
您所在位置:人才网 > 工作机会 > 大数据开发工程师
大数据开发工程师
25000-30000元/月
广东-深圳| 5-10年| 本科| 招2人|软件工程师
定期体检 五险 五险一金
丽山路桑泰大厦
2020-11-23 发布
申请职位
职位描述

岗位职责

1、负责大数据架构设计,包括定义数据的存储、集成(ETL)、应用,支撑业务运营和数据分析类需求实现;

2、制定数据治理领域的数据体系化管理措施,包括元数据设计、数据标准、数据质量、数据处理、数据安全等工作,确保数据可信与安全;

3、基于行业数据积累,满足业务的数据挖掘需求,实现从数据到资产的转变,根据目标行业建立具有前瞻性的数据模型;

4、对各产品的数据安全负责,主导制定和实施数据库系统安全策略,保证整体方案数据安全;

岗位要求

业务技能要求:

1、深入理解云化、数据仓库,在参与过的系统设计中,必须涉及这两项关键技术;

2、精通或者熟悉Hadoop体系架构,以及HDFS/HBase/Hive/MapReduce/Spark等技术,了解体系架构各组件的优缺点,有直接的产品设计与开发、部署、调优的经验;

3、精通或熟悉常见RDBMS(Oracle/PostgreSQL/MySql)、NoSQL(Redis/Memcached/MongoDB)、全文搜索引擎(Solr/ElasticSearch)的使用及开发,了解各数据库优缺点,熟悉与架构设计相关的数据存储、性能调优等相关领域知识,有相关项目经验尤佳;

4、熟悉业界常用的数据采集、集成、数据存储、计算、数据模型、数据分析的技术方案,具有数据分析或数据挖掘相关经验者优先;

5、熟悉数据治理相关流程,包括数据接入、数据处理、数据治理、数据组织、数据服务等。

专业知识要求:

1、具备数据治理的知识与体系方案,包含政策、组织、角色、流程、规范等,以及规划相应的支撑方案。了解业界的数据管理方法论;

2、具备数据用例设计和开发能力。能够基于业务相关数据进行业务需求分析和痛点识别,将业务需求转化为数据的需求,完成数据用例的设计和开发;

3、精通海量数据、数据仓库、数据集市的构建流程。

4、具备根据业务场景,设计数据仓库结构的能力,并且能同时兼顾海量数据高并发和高吞吐。

公司简介
通信工程、仪器仪表、计算机软硬件的研发及销售;经营电子商务(法律、行政法规、国务院决定禁止和规定在登记前须经批准的项目除外);国内贸易(不含专营、专控、专卖商品);经营进出口业务;系统集成;无线电频谱监测、检测技术研开发;电磁环境监测、检测技术研发。
快速留言

全部留言

网优提醒你:以招聘为名收取的培训费用,提供培训贷款,或在录用过程中支付体检、服装、押金等费用的,都属违法行为。为规避风险,请您在使用前自行予以核实,风险自负。
×
简历列表
关于网优fengj.com | 付款方式 | 400客服:400 622 1112 |  热线:0799-6666660