IDvs.MoRec

让推荐模型直接吃透图文音,端到端训练提效果

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 开源模型 🍴 复刻 19 🐛 待处理 6 👀 关注 2
GitHub ↗
GitHub 星标 ★ 169
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,Apache-2.0许可证,可免费使用和部署。

项目预览

IDvs.MoRec 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类开源模型
开发团队westlake-repl
定价模式🏷️完全免费
价格说明开源项目,Apache-2.0许可证,可免费使用和部署。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议Apache-2.0
主要语言Python
技术栈/模型end-to-end,foundation-models,foundation-recommendation-model,image-recommendation,large-language-model,llm,llm-recommendation,modality-based-recommendation,multimodal,multimodal-deep-learning,multimodal-recommendation,multimodal-recommendation-dataset,text-recommendation,transferable-recommendation
GitHub 星标★ 169
上线时间2023-04-13 00:00:00
代码更新2025-02-02
仓库体积58.9 MB
本站数据更新2026-11-18
维护状态低维护
收录时间2026-08-09
浏览次数4

项目介绍

IDvs.MoRec 是一个面向多模态推荐系统的端到端训练框架,由快手主导开源。它针对当前推荐系统中广泛使用的 ID 序列建模与新兴的多模态内容(如文本、图像、音频)特征融合问题,提出了一套统一的解决方案。项目核心解决的是:在推荐场景中,如何高效地将多模态信息与用户行为序列结合,避免传统两阶段训练(先预训练多模态编码器再训练推荐模型)带来的信息损失和训练效率低下问题。其核心能力包括:支持多种主流多模态骨干网络(如 BERT、ViT)的即插即用接口,提供端到端的联合优化策略,以及针对大规模工业级数据设计的分布式训练方案。通过对比实验,项目验证了在多模态特征充足时,端到端训练能显著提升推荐效果,为多模态推荐的研究和工程实践提供了参考基线。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 169

核心亮点

  • 提供端到端训练范式,避免多模态特征与推荐模型分离训练导致的信息损耗
  • 集成多种主流多模态编码器(如BERT、ViT),便于快速替换和实验对比
  • 基于快手工业级场景验证,代码结构清晰,适合作为研究基线

不足之处

  • 文档和社区支持尚不完善,上手可能需要一定代码阅读成本
  • 项目处于早期阶段,功能迭代和稳定性有待观察

适用场景

  • 短视频/直播平台的内容推荐,融合封面图、标题文本和音频特征
  • 电商商品推荐,利用商品图片和描述文本提升冷启动效果
  • 学术研究:对比不同多模态融合策略对推荐精度的影响

替代项目

MMRec、FuxiCTR、DeepCTR

上一篇:SaprotHub

下一篇:ssl-wearables

同类项目推荐

evo-crm-community 开源

自托管 AI 客服加 CRM,一套系统管会话和商机

Open source and self-hosted AI-powered customer service platform. Single-tenant, no ···

★ 312 2026-10-24
BianQue 开源

中文医疗问答,微调LLaMA,提供专业预问诊对话能力

中文医疗对话模型扁鹊(BianQue)

★ 895 2026-08-09
mod-ollama-chat 开源

给魔兽私服机器人接上大模型,聊天不再复读机

mod-ollama-chat is an AzerothCore module that enhances the Player Bots module by int···

★ 139 2026-10-15
KoalaQA 开源

用AI自动回答售后问题,大幅降低人工成本,实现零接触解决。

KoalaQA 是一款 AI 大模型驱动的开源售后服务社区,提供 AI 回答、AI 搜索、AI 运营等能力···

★ 564 2026-08-09
resume-jd-optimizer-cn 开源

输入JD,一键生成高匹配中文简历和ATS文本

JD-driven Chinese resume optimization skill for China job seekers. 解析岗位 JD、诊断···

★ 200 2026-08-09
spoken-to-signed-translation 开源

把口语文本一路转成手语视频的流水线

a text-to-gloss-to-pose-to-video pipeline for spoken to signed language translation

★ 105 2026-09-11
shortdrama-pipeline 开源

一键生成短剧剧本、角色和视频,打造你的AI短剧生产线

Backend-first AI pipeline for Chinese short-drama script, character, and video gener···

★ 121 2026-08-09
paperless-gpt 开源

让 paperless-ngx 自动读懂文档,分类打标不再手动

Use LLMs and LLM Vision (OCR) to handle paperless-ngx - Document Digitalization powe···

★ 2841 2026-08-09
Navi 开源

给网络安全专家的AI助手,用对话搞定安全分析

An Interface for AI built for cybersecurity professionals

★ 97 2026-08-09