岗位职责： 1、参与大数据平台实施，提供数据储存查询、数仓建模、实时计算、元数据管理的架构设计。 2、大数据相关解决方案的设计文档撰写。 3、负责数据汇集、数据清洗、数据质量管理，监控并维护例行ETL任务。 4、管理并优化非结构化数据存储、并行计算、计算资源利用效率。 5、负责技术选型，大数据架构设计，需求可行性评估，持续优化改进。 6、与团队紧密合作，提出合适的解决方案，解决难点问题。 任职要求： 1、学历要求：本科及以上。 2、专业要求：计算机相关专业。 3、经验要求：5年及以上大数据相关工作经验。能独立负责大数据相关数据存储、计算和应用的设计、开发工作。 4、理论知识要求：熟悉大数据基本组件及相关工作原理，至少包含Kafka、Hadoop、Hive、HBase、Spark或Flink等组件。熟悉MySQL数据库，Java编程语言，SQL编程语言。Linux操作系统、了解网络相关知识。 5、技术、能力要求： 具备无线电监测数据处理能力。具备半结构化数据处理能力。具备调试能力，能够独立解决研发过程中常规问题。具备离线数仓或实时数仓的设计研发能力。具备分布式编程能力。具备数据分析性能调优能力。具备SQL调优能力。具备Java代码优化能力。具备软件设计说明书编写能力。