大数据

岗位职责
人员要求：1. 岗位名称：数据开发岗
2. 岗位职责：
负责日常ETL全流程开发、调试与优化；完成大数据相关开发任务，保障数据处理准确高效；维护ETL脚本及流程，排查解决开发问题；协助编写数据相关文档
3.任职要求：
（一）专业技能
1. 熟练掌握ETL开发流程，能独立完成数据抽、转、载全流程开发与优化。
2. 具备扎实大数据开发基础，熟练使用Hadoop、Spark、Flink等框架之一，处理海量数据。
3. 精通SQL，能编写复杂查询及存储过程，熟悉MySQL、Oracle、Hive等主流数据库操作。
4. 了解数据仓库设计及分层开发，掌握Python/Shell等至少一种脚本语言。
5. 了解Airflow等数据调度工具，具备ETL任务异常排查及问题解决能力。
（二）学历与经验
1. 本科及以上学历，计算机、大数据等相关专业优先。
2. 1年及以上ETL及大数据开发经验，有外包经验者优先；优秀应届生可面议（需有相关实践）。
（三）素质要求
1. 沟通协调能力强，能快速理解需求、配合团队推进工作。
2. 认真严谨、责任心强，具备较强问题解决能力，能承受一定工作压力。
3. 学习能力强，服从项目安排，遵守外包服务规范。
4. 熟悉Linux基本操作者优先