1、负责互联网数据爬取；
2、负责大数据数据平台分析及开发；
3、参与大数据平台的架构设计、搭建；
4、负责基于hadoop的数据ETL设计与开发；
5、负责大规模数据检索系统的设计与开发；
6、负责大数据的日常加工、整理和统计分析。

1、熟悉数据管理与数据治理的理论框架、概念及模型，包括主数据、元数据、数据资源目录等2、了解hadoop及spark平台架构,熟悉HDFS，HBase，Hive，MapReduce，ZooKeeper等框架；3、熟练掌握基于spark平台的数据采集、建模、数据分析相关技术；熟练使用scala进行大数据程序的开发；4、具备较强的沟通能力；有良好的团队协作能力；有良好的学习和理解能力，能够较快了解和掌握新知识；具备综合分析和解决问题能力；5、诚实、踏实、认真负责，愿意长期从事软件开发工作，能承受一定的工作压力

联系人：人老师
公司地址：济南市历下区历山路36号，利宝产业大厦
最近登录：2021-01-07