数据仓库工程师负责数据平台相关的管理工作,如数据研发规范、数据质量及稳定性保证等建设。下面是爱阅读小编为您精心整理的数据仓库工程师岗位的基本职责。
职责:
2、负责与多个应用对接的接口和框架设计
3、充分理解产品需求,能够结合需求进行任务设计,完成详细设计文档的编写。
岗位要求:
1. 从事数据仓库及商业智能(BI)领域工作至少3年以上,熟悉数据仓库模型设计方法论,并有实际的模型设计经验,有大型数仓建设经验优先;
2. 精通数据仓库领域知识和管理技能,包括但不局限于:元数据管理、数据质量、主数据管理、性能调优等;
3.有主流商业/开源ETL工具(Informatica、Datastage、Kettle等)使用经验者优先;
4. 熟悉Hadoop生态相关技术并有相关实践经验,包括Hdfs、Map-Reduce、Hive、Hbase、Spark等,具备海量数据加工处理(ETL)相关经验;
5. 熟练使用java语言,对微服务架构有一定了解;
6. 具有较强的团队意识与良好的沟通能力及高度的工作责任感,热爱技术,有很强的钻研能力,乐于接受有挑战性的任务;
7、有团队管理经验优先。
职责:
2、负责公司数据服务接口平台的建设;
3、参与打造数据中台内容的规划、设计、开发工作,实现高质量数据的互通与共享; 4、参与数据模型体系构建及数据主题设计和开发,搭建离线、近线、实时数据公共层;
5、参与构建非结构化数据体系,进行网络数据爬取,数据清洗,特征挖掘,统计分析,并结合应用场景实现落地。
岗位要求:
2、熟悉数据集成、数据仓库、数据分析等全流程数据处理,具备开源或阿里大数据平台实战经验,如hive/spark/Maxcompute;
4、熟悉常见的离线、实时、流式数据应用场景及架构;
5、至少掌握一门开发语言,Java/Python;
6、具备良好的沟通能力和设计文档编写能力;
职责:
负责大数据数据仓库的建设,根据数据仓库及BI项目的需求,制定相关的设计方案和开发计划;
组织项目组成员完成数据仓库的开发和运维等;
协助技术人员完成数据管控平台的搭建,完成数据规范管理体系到信息平台的落地实施;
任职资格:
有一定的互联网数据仓库经验;
深入了解 Hadoop 生态系统,熟悉HBase、Hive、Storm、spark等大数据开发工具中一种或几种;
具备大型数据仓库架构设计、模型设计、ETL 设计的相关经验;
关系型数据库原理基础扎实,熟悉 MySQL/PostgreSQL等的使用和调优;
职责:
1、深入理解业务,了解需求和痛点,为风控和业务部门提供数据支持;
2、针对业务需求,参与数据仓库需求分析,制定ETL相关设计方案和开发计划;
4、数据仓库模型设计,分层体系构建,元数据管理监控以及权限控制。
任职资格:
2、具有2年以上金融贷款类业务经验;
3、熟悉数据仓库理论和数据库建模,有redshift和AWS经验优先;
4、精通pgsql/mysql等数据库,精通sql语言,具有数据库优化/sql优化相关经验;
5、熟练掌握python/shell语言。
职责:
1.参与打造数据中心内容的规划、设计、开发和优化工作,实现高质量数据的互通与共享;
2.参与数据模型体系构建及数据主题设计和开发,搭建离线、实时数据仓库;
4.负责日常应用系统监控,发现异常问题及时分发,并跟进后续处理;
5.编写Python程序,或ETL技术完成日常数据抽取和整理任务,可独立进行数据分析;
岗位要求:
1.熟悉ETL开发、数据仓库设计流程,熟悉Oracle, MS SQL Server 等主流数据库,表结构设计,存储过程编写;
2.熟练掌握常用Linux命令,具备shell编程能力,熟练掌握Python编程语言
3.具有较强的语言表达和沟通能力,良好的团队合作精神
上一篇:数据分析师的工作职责
下一篇:销售数据分析师的职责




