1、 负责大数据平台、数据仓库以及大数据架构搭建及平台的运维保障工作 2、 生产系统数据的抽取、转储、检索、挖掘等开发工作 3、 参与各种Hadoop分布式数据基础框架的改进和调优 任职要求 1. 熟悉Hadoop生态体系,包括但不限于Hive、HBase、Spark、Sqoop、Flink等 2. 熟悉整个大数据的完整处理流程,包括数据的采集、清洗、预处理、存储、分析挖据、机器学习和数据可视化。 3. 数据采集,数据库设计,清洗,转换和落地的经验(ETL, SQL, Data Streaming的过程) 4. 熟悉Java、Python语言,熟悉Linux平台 5.计算机、电子、通信、数学、统计学等相关专业,本科及以上的学历,
国内某集成电路生产企业绍兴分公司
职位顾问