微信视觉WeMM-Embedding 全模态内容理解研究
关于这个机会
课题背景: 微信生态中的内容形态丰富,不同业务对语义理解、内容关联与细粒度判别具有共性需求。本课题围绕WeMM-Embedding,研究面向文本、图像、音频、视频等全模态数据的统一表征与理解方法,构建可跨任务、跨场景复用的内容理解能力,服务微信内搜索、推荐、内容安全及RAG、Agent等应用场景。 课题挑战: 1. 统一语义建模:对齐不同模态,保留细粒度语义、时序关系与跨模态互补信息,提升复杂内容的理解能力。 2. 数据与泛化:应对大规模异构数据中的噪声、长尾与弱监督问题,提升模型在不同任务和业务场景下的泛化能力。 3. 效果与效率:建立覆盖全模态、多任务的评测体系,兼顾理解效果、训练推理效率与业务应用成本。 具体工作: 参与全模态表征与理解模型的设计、训练和优化,研究跨模态对齐、细粒度语义与时序建模;参与数据构建、评测与消融实验,推动模型在微信业务场景中的应用。
任职要求
学历和专业要求: 计算机科学、人工智能、电子信息、数学等相关专业的硕士或博士研究生优先,具备扎实的数学与机器学习基础。 技术技能要求: 掌握深度学习、表征学习等算法及应用,熟悉多模态对齐与大模型训练;熟练使用Python和PyTorch,具备视觉、语言或音频方向研究实践者优先。 软性素质要求: 具备较强的研究热情、问题分析与独立探索能力;善于沟通协作,能清晰表达技术方案与实验结论,主动推动研究成果在真实业务中验证和落地。
内推申请说明
本站为独立内推协助平台。申请会交由管理员核实岗位与内推渠道,不等于已在公司官网投递;薪资、岗位状态和实际招聘流程以官方信息为准。