
Awesome-Multimodal-LLM-for-Code
一页看全多模态代码生成论文与数据集
这是一个面向多模态代码生成研究的论文清单与资源汇总项目,对应 TMLR 2026 论文《Multimodal Large Language Models for Code Generation under Multimodal Scenarios》。它解决的问题是:现有代码大模型研究多聚焦纯文本输入,而真实开发场景中常伴随截图、UI 设计稿、流程图、表格、终端报错截图等多模态信息,社区缺少系统性的任务定义、数据集和评测梳理。项目按多模态场景(如图像到代码、UI 截图生成前端、图表转代码等)组织相关工作,汇总论文、数据集、基准与模型,帮助研究者快速定位方向、对比方法,也为工程团队评估多模态代码助手能力提供参考。核心能力是分类索引与持续更新,属于 awesome 类资源库而非可运行工具。
项目数据
使用教程
核心亮点
- 按多模态场景(截图、UI、图表等)分类整理论文,便于快速定位子方向
- 配套 TMLR 2026 论文,任务定义与评测视角相对系统
- 汇总数据集与基准,可直接用于调研或实验选型
不足之处
- 仅为资源清单,无代码实现或可直接运行的评测工具
- 早期项目,收录范围与更新频率有待观察
适用场景
- 研究生调研多模态代码生成方向,快速建立文献地图
- 团队评估多模态代码助手时,查找可用数据集与基准
- 撰写相关论文时,引用任务分类与已有工作对比
替代项目
awesome-LLM4Code、Awesome-Code-LLM
项目介绍
上一篇:InferenceX
下一篇:One-Eval
同类项目推荐
akto
开源
给 AI 应用做安全体检,防提示注入和数据泄露
Akto is the fastest growing AI Security platform for your teams to secure AI agents,···
XSafeClaw
开源
给 AI 智能体装上安全盾,自动红队测试找漏洞
Introducing XSafeClaw: The Open-Source Agent Safety Platform from Fudan University
Tracely-ai
开源
把生产事故变成回归测试,合并前自动拦截 AI 故障
Trace-native CI/CD for AI agents — production failures become regression tests that···
fast-llm-security-guardrails
开源
给 AI Agent 加一道快速安全闸门,防提示注入和隐私泄露
The fastest Trust Layer for AI Agents