Awesome-Multimodal-LLM-for-Code

一页看全多模态代码生成论文与数据集

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 评测安全 🍴 复刻 15 👀 关注 5
GitHub ↗
GitHub 星标 ★ 289
维护状态 较活跃
是否开源 开源
定价模式 🏷️完全免费 学术论文,免费公开

项目预览

Awesome-Multimodal-LLM-for-Code 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类评测安全
开发团队xjywhu
定价模式🏷️完全免费
价格说明学术论文,免费公开
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
技术栈/模型awesome,code-generation,multimodal-large-language-models
GitHub 星标★ 289
上线时间2024-09-06 00:00:00
代码更新2026-10-22
仓库体积238 KB
本站数据更新2026-11-04
维护状态较活跃
收录时间2026-09-14
浏览次数2

项目介绍

这是一个面向多模态代码生成研究的论文清单与资源汇总项目,对应 TMLR 2026 论文《Multimodal Large Language Models for Code Generation under Multimodal Scenarios》。它解决的问题是:现有代码大模型研究多聚焦纯文本输入,而真实开发场景中常伴随截图、UI 设计稿、流程图、表格、终端报错截图等多模态信息,社区缺少系统性的任务定义、数据集和评测梳理。项目按多模态场景(如图像到代码、UI 截图生成前端、图表转代码等)组织相关工作,汇总论文、数据集、基准与模型,帮助研究者快速定位方向、对比方法,也为工程团队评估多模态代码助手能力提供参考。核心能力是分类索引与持续更新,属于 awesome 类资源库而非可运行工具。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-09-14 · 当前星标 ★ 289

核心亮点

  • 按多模态场景(截图、UI、图表等)分类整理论文,便于快速定位子方向
  • 配套 TMLR 2026 论文,任务定义与评测视角相对系统
  • 汇总数据集与基准,可直接用于调研或实验选型

不足之处

  • 仅为资源清单,无代码实现或可直接运行的评测工具
  • 早期项目,收录范围与更新频率有待观察

适用场景

  • 研究生调研多模态代码生成方向,快速建立文献地图
  • 团队评估多模态代码助手时,查找可用数据集与基准
  • 撰写相关论文时,引用任务分类与已有工作对比

替代项目

awesome-LLM4Code、Awesome-Code-LLM

上一篇:InferenceX

下一篇:One-Eval

同类项目推荐

semantic-object-accuracy-for-gen··· 开源

评估生成图像中对象是否画对了,给文本到图像模型打分。

Code for "Semantic Object Accuracy for Generative Text-to-Image Synthesis" (TPAMI 20···

★ 106 2026-08-09
faster_coco_eval 开源

替换 pycocotools,COCO 评测提速数倍不丢精度

Continuation of an abandoned project fast-coco-eval

★ 147 2026-09-14
jevals 开源

每条 trace 一次请求,几分钱延迟低到能进 Agent 循环

Agent evals and guardrails as Jev decisions: one request per trace, a fraction of a ···

★ 111 2026-10-03
watchtower 开源

用 LLM 编排本地网站渗透测试,自动出报告

Watchtower is a simple AI-powered penetration testing automation CLI tool that lever···

★ 220 2026-10-21
mcp-observatory 开源

在智能体接入前,自动给 MCP 服务器做安全体检

Free, MIT-licensed MCP security testing from ClearFrame. Scan, audit, compare, and r···

★ 135 2026-08-09
tensor-trust 开源

玩游戏,收集提示注入数据,助力AI安全研究

A prompt injection game to collect data for robust ML research

★ 81 2026-08-09
rhesis 开源

让领域专家给AI当教练,用标注反馈驱动智能体快速进化

The collaboration layer for AI teams: domain experts review and annotate agent behav···

★ 402 2026-08-09