工作职责
架构设计:负责设计并优化大数据处理与分析平台的整体架构,确保系统能够高效、稳定地处理海量数据,同时满足数据安全、隐私保护等要求。
技术选型与实施:根据业务需求和技术发展趋势,调研并选择合适的大数据技术栈(如Hadoop、Spark、Kafka、Hive、Elasticsearch、Flink等),并主导技术方案的实施与落地。
数据治理与标准制定:推动数据治理工作,包括数据质量管理、数据安全控制、数据标准定义及元数据管理等,提升数据资产的价值和可信度。
性能调优与故障排查:对大数据处理系统进行性能调优,确保系统在高并发、大数据量情况下仍能保持稳定运行。同时,负责系统故障的排查与解决,保障业务连续性。
技术创新与分享:关注大数据领域的新技术、新趋势,积极探索并引入新技术以提升团队的技术能力和项目竞争力。同时,积极参与技术分享与交流活动,促进团队知识共享。
任职资格
计算机科学、数学、统计学或相关专业硕士及以上学历。
至少10年以上大数据相关领域工作经验,有成功的大型大数据项目架构设计、实施、落地及管理经验。
精通大数据处理生态中的关键技术,有深入理解和实战经验。
具备良好的问题解决能力和系统思维能力,能够独立分析和解决复杂的技术问题。
优秀的沟通能力和团队合作精神,能够跨部门协作,推动项目顺利进行。
对新技术有强烈的求知欲和学习能力,能够快速掌握并应用新技术。
有良好的英语读写能力,能够阅读英文技术文档和参与国际技术交流者优先。