数据工程岗位职责

2023-10-16

数据工程岗位职责 篇1

  1、负责国内外上市公司、股票、基金、债券等金融相关数据进行收集、整理和分类;

  2、根据业务需求和相关算法模型公式,对原始数据进行加工、清洗工作;

  3、协助处理项目反馈的数据问题,保证数据质量和精准度;

  4、搭建和完善数据采集平台,保证平台的高效和稳定性。

数据工程岗位职责 篇2

  1、负责数据平台数据整合与数据仓库模型的建立、维护和优化;

  2、参与指标体系与报表的设计、开发与维护;

  3、了解、监控应用需求及数据源的变化,并评估对数据仓库模型的.影响;

  4、设计数据模型的etl实现,参与团队etl流程的优化以及相关技术问题的解决。

  5、基于数据分析和数据资源的挖掘,提升数据的商业应用价值。

数据工程岗位职责 篇3

  1、具备大数据或者数据库工作经验2年以上;

  2、熟悉主流nosql数据库技术hbase,mongodb图数据库等其中两种;

  3、熟悉hadoop生态圈技术;熟悉3个以上大数据开发框架和中间件:hive、kafka、flume、spark等;

  4、具有java、python调试、linux、shell编程能力;

  5、思路清晰、良好的学习能力、善于协作、沟通和具备团队合作意识,能够适应出差。