锦鲤求职岗位描述
工作内容
1. 大数据平台的开发：负责数据的ETL开发、任务调度以及SQL脚本的调优，使用spark SQL、shell脚本接入数据，处理(清洗、识别、转换)数据；
2. 大数据平台的运维：负责大数据平台的维护（性能优化、功能开发、平台迭代）以及数据处理任务的监控和问题解决。
任职条件
1. 计算机/软件工程/通信/数学等相关专业本科及以上学历；
2. 熟悉 SQL，了解Hive/ MySQL / Oracle至少一种；熟悉 Linux 常用命令；熟悉 Hadoop（HDFS/YARN/MapReduce）、Hive、Spark、Flink、Kafka、Zookeeper 等；了解数据仓库建模方法论（星型/雪花模型）、熟悉ETL 流程；
3. 有 Hadoop/Spark 实际部署实习经验，了解一门编程语言（如java/ python），了解 Docker / Kubernetes 基本概念与常用操作；
4. 良好的沟通能力、团队合作精神；认真负责、具有高度责任感；具备快速学习能力和创新精神。