1.负责公司大数据产品架构的设计与实现;
2.配合大数据产品经理完成产品的快速研发与交付;
3.负责大数据产品架构的持续优化设计;
4.负责大数据产品核心组件设计;
5.负责大数据相关数据架构规划、数据建模、数据库设计以及大数据产品研发工作;
6.并为应用开发团队提供技术支撑。
1.硕士及以上学历,5年以上的大数据开发经验、2年以上大数据架构设计经验;
2.丰富的JAVA研发经验,精通JAVA,熟悉Python/Scala等编程语言;
3.具备深厚的分布式系统或数据库系统的理论基础,熟悉分布式计算系统的工作机制,具有分布式文件系统、分布式数据库系统、集群存储系统等架构设计经验;
4.熟悉整个大数据的完整处理流程(数据的采集、清洗、预处理、存储、分析挖掘、机器学习和数据可视化);
5.精通各种大数据相关技术体系:Hadoop、Spark、Storm、ElasticSearch、Neo4J、Kafka;
6.有数据挖掘、机器学习相关应用或研究背景;
7.有微服务架构或开发经验。