锦鲤求职锦鲤求职

海尔

多模态交互工程师/专家

岗位标注公司:海尔智家

  • 社招
  • 上海
  • 后端开发
  • 发布于 2026-10-17
原岗位链接 ↗

岗位描述

职责描述
• 负责交互模块设计、编码、测试与上线维护,开发流式输入、会话管理、上下文及交互编排功能,完善可复用接口。

• 结合语音、图像、屏幕内容和设备状态实现多模态交互功能,处理时间对齐、事件关联、指代目标及过期上下文问题。

• 研发交互状态机及实时调度逻辑,实现轮次判断、打断、取消与恢复,结合模型或算法输出处理连续对话和多设备冲突。

• 对接语音、视觉语言及对话模型,完成输入组织、推理适配与结果校验,分析失败样本,协同算法团队迭代模型及交互策略。

• 将交互意图映射为设备工具调用,完成参数与权限校验、执行状态回传、意图澄清及失败反馈,验证用户所指与执行目标一致。

• 开展终端与云端联调,分析首响应、打断时延、内存及功耗,优化异步处理、缓存和推理调用,保障弱网降级与长时稳定性。

• 构建场景数据、交互回放与自动化评测,覆盖噪声、遮挡、多用户及错误指代等用例,验证模型和策略升级效果。

• 与产品、设计、算法、音视频及终端团队快速验证原型,完善日志、文档与版本兼容,跟进灰度发布及线上问题闭环。

任职要求
• 计算机、人工智能、通信或相关专业背景,具备扎实的数据结构、操作系统与软件工程基础。

• 熟练使用 C / C++、Python 或其他主流语言,具备生产代码开发与调试能力,能够独立交付模块并定位性能问题。

• 具备语音交互、视觉理解、对话系统或 AI 运行时中至少一个方向的项目经验,能够说明模块设计、效果验证及问题定位过程。

• 理解多模态模型或对话模型的输入输出、上下文及工具调用机制,能够完成推理集成、失败样本分析和基本效果评测。

• 熟悉异步编程、状态机和流式通信,能够处理乱序、重复回调、超时、取消及跨模块状态同步问题。

• 具备终端或服务端 AI 功能联调经验,能够结合链路日志及评测数据分析响应时延、资源消耗和交互失败原因。

• 具备良好的测试、文档与协作习惯,愿意结合真实设备及用户反馈持续改进功能,并关注隐私和设备操作权限。

后端开发方向的申请准备

先核对岗位要求与自己的经历,再准备档案、投递和面试。

阅读求职步骤与示例 →