岗位薪资:7k-1.3w
岗位职责:
1、负责使用Hadoop、Spark、Storm、Kafka、Zookeeper、Flink等工具,设计、开发和实施产品或项目的大数据服务。
2、负责构建业务领域的数据仓库,开发和维护相关脚本。
3、负责研究和应用与大数据相关的新技术。
4、负责数据分析和建模项目的业务需求分析及技术实现。
任职要求:
1、熟练使用Python或Scala等大数据相关编程语言进行开发。
2、熟悉Oracle、MySQL、Hive、HBase、Spark等数据库和并行计算框架,能够完成项目中的数据计算任务开发。
3、充分理解大数据项目需求,能够提供项目解决方案设计,并完成功能模块的开发和测试。
4、根据数据分析需求,完成数据清洗和预处理工作。
5、使用大数据分析工具和脚本语言等,完成大数据指标分析。
6、熟练编写Shell或Python脚本,进行大数据集群的日常维护、故障定位和优化工作。、