锦鲤求职岗位描述
工作内容
1. 数据采集与集成，设计并实现数据采集方案；
2. 数据存储与管理，设计和优化数据存储架构，选择合适的数据库或数据仓库；
3. 数据处理与构建，开发和维护数据处理管道，支持批量处理或实时流处理；优化数据处理效率，解决数据延迟、冗余等问题，提升数据流转性能；
4. 数据质量与安全，建立数据质量监控机制，识别并修复数。
任职条件
1.编程语言：熟练掌握Python、Java/Scala等，能编写高效的数据处理脚本；；
2.大数据工具：掌握Hadoop、Spark、Flink、Hive等大数据处理框架，熟悉Kafka等消息队列工具；
3.其他：了解Linux系统操作，熟悉SQL查询优化，具备基本的云计算平台（AWS、阿里云、Azure）使用经验者优先；
4.身体健康，无传染病、精神病史等；
5.遵章守纪，在工作无处分记录、无犯罪记录，身体躯干部位无纹身；
6.刻苦耐劳，服从安排，退伍军人优先考虑。