岗位职责：

1.参与大数据机构的规划设计工作，负责大数据平台的搭建、运维，和开发工作；

2.参与数据仓库设计，根据业务需求高效实现数据查询，数据分析，数据挖掘；

3.负责高吞吐、高可用，高并发的大数据业务架构设计；

4.负责新技术领域的探索，配合上级完成研发技术发展方向制定。



任职要求：

1.本科及以上学历，计算机、软件研发、通信、信息系统等相关专业;

2.3年及以上Java开发经验，精通Java语言，熟悉JVM原理，掌握常用IO模型;

3.熟悉Spring生态、掌握Mybatis等ORM框架，掌握主流关系型数据库和非关系型数据库;

4.具有大数据，数据湖整体系统架构设计经验，包括数据的采集、清洗、预处理、存储、任务调度、分析挖掘和可视化等。有从0到1设计搭建大数据平台经验者优先;

5.熟悉并使用过Hadoop、Hbase、Zookeeper、Hive、Spark、Kafka、Flume、Dolphinscheduler、DataX、Flink、Docker、Pulsar、Elk、Superset、Clickhouse、Hudi等技术，精通其中的部分技术更佳;

6.熟练Shell脚本，会(Scala/R/Python)语言中的一种，或者掌握区块链技术更佳。