大数据平台研发工程师-山东招聘网

联系方式

联系人：中国联合网络通信有限公司软件研究院

联系电话：152****5633

打电话联系前先投递一份简历，面试成功率提高60%！

(联系我时，请说是在山东易职邦上看到的)

职位描述

【岗位职责】 1、负责 Hadoop+Doris大数据平台核心组件的研发与建设，提升平台的稳定性、可扩展性与易用性。 2、跟踪业界先进大数据技术，跟踪数据湖、存算分离、云原生数仓等前沿技术，完成调研、POC与技术文档输出。 3、参与制定湖仓一体大数据平台技术演进方案。 4、负责大数据平台的日常生产支撑、监控告警、故障处理与性能优化。【任职要求】 1、学历要求：硕士及以上学历。 2、专业要求：计算机、电子信息、数学、统计学、自动化等相关专业。 3、技术要求：（1）熟练掌握至少一门语言（如Python/Java/C++等）。（2）掌握Linux系统的基本命令和操作，能编写自动化运维工具。（3）了解HDFS、YARN、Hive、HBase、Spark、Flink、Doris等组件的基本原理。（4）了解Kafka、Pulsar等分布式消息中间件技术及底层原理。（5）了解云原生概念，了解或使用过容器化技术（如Docker）、容器编排工具（如Kubernetes）。（6）深入理解分布式存储、计算、一致性协议（如Zookeeper/Paxos/Raft）。（7）了解Lambda/Kappa架构，有数据湖（Iceberg/Hudi/Paimon）、存算分离架构或云原生数据平台经验者加分。 4、综合素质：责任心强，善于团队协作，主动思考，自我驱动力强；具备良好的系统分析能力、抽象思维和逻辑思维能力，能独立分析与解决问题。