u2Tokenizer

多尺度看懂胸片,自动生成放射报告

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 行业应用 🍴 复刻 21 👀 关注 13
GitHub ↗
GitHub 星标 ★ 283
维护状态 较活跃
是否开源 开源
定价模式 🏷️完全免费 开源项目,免费使用

项目预览

u2Tokenizer 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类行业应用
开发团队Siyou-Li
定价模式🏷️完全免费
价格说明开源项目,免费使用
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型multimodal-large-language-models
GitHub 星标★ 283
上线时间2024-11-17 00:00:00
代码更新2026-10-20
仓库体积21.7 MB
本站数据更新2026-11-03
维护状态较活跃
收录时间2026-09-15
浏览次数1

项目介绍

u2Tokenizer 是一个面向放射学报告生成(RRG)任务的多尺度多模态大语言模型开源项目。它要解决的问题是:传统放射报告生成模型通常只处理单一尺度图像特征,难以同时捕捉胸片中全局解剖结构与局部病灶细节,导致报告描述不完整或漏诊。项目通过多尺度视觉编码与多模态大语言模型结合,把不同分辨率的影像特征对齐到统一 token 空间,再交由语言模型生成结构化放射报告。核心能力包括多尺度图像特征提取、跨模态对齐、以及针对 RRG 任务优化的生成流程,支持在公开胸部影像数据集上训练与推理。项目以 Python 实现,代码结构围绕多模态大模型展开,适合医学影像与自然语言处理交叉方向的研究者复现和二次开发,也可作为临床辅助报告生成的实验基线。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-09-15 · 当前星标 ★ 283

核心亮点

  • 针对 RRG 任务做多尺度视觉编码,能兼顾全局解剖与局部病灶细节
  • 基于多模态大语言模型,报告生成更接近自然语言表达而非模板拼接
  • 提供完整 Python 实现,便于在公开胸部影像数据集上复现与微调

不足之处

  • 项目处于早期阶段,文档与使用示例可能不够完善
  • 依赖医学影像数据与较大算力,普通开发者上手门槛较高

适用场景

  • 医学影像 AI 研究者复现放射报告生成基线
  • 医院或科研机构探索胸片辅助报告生成
  • 多模态大模型在垂直医疗领域的微调实验

替代项目

LLaVA-Med、Med-PaLM M 相关开源实现、RadFM

上一篇:GenSim

下一篇:awesome-LLM-AIOps

同类项目推荐

aurora 开源

让 AI 自动查故障,SRE 告别熬夜翻日志

Aurora — Open source AI-powered agentic incident management & root cause analysis f···

★ 451 2026-08-09
bazi-ziwei-skill 开源

让 AI 精准排八字紫微,一键生成水墨命盘海报

AI 八字 + 紫微斗数排盘与综合印证 Skill:算法精准排盘(不靠 LLM 猜),三种分析模式,一···

★ 783 2026-08-09
healthcare-ai-agent-vault 开源

把苹果健康数据变成AI能懂的家庭健康档案

ai agent healthcare vault for family that combines Obsidian templates, AI prompt wor···

★ 141 2026-08-09
meihua-yishu 开源

让 AI 秒变占卜师,对话中轻松起卦解卦

梅花易數 - 適用於 Claude、ChatGPT、Gemini、DeepSeek 等 AI/LLM 的占卜技能

★ 211 2026-08-09
book-translator 开源

本地离线整本书翻译,术语一致还能对照校对

Tolmach — open-source AI book translator powered by Ollama. Translate EPUB, PDF, DO···

★ 126 2026-10-06
dnb-ai 开源

带经文出处的宗教问答后端,答不上来转学者复核

Islamic-knowledge AI service for DeenBridge — FastAPI + Gemini assistant with verif···

★ 162 2026-10-27
AnalogCoder 开源

用大模型直接生成可仿真的模拟电路代码,免训练。

[AAAI 2025 Oral] AnalogCoder: Analog Circuit Design via Training-Free Code Generatio···

★ 211 2026-09-14
botkube 开源

在聊天群里直接监控和操作 Kubernetes,不用再切终端

An app that helps you monitor your Kubernetes cluster, debug critical deployments & ···

★ 2313 2026-08-09
Raycast-Easydict 开源

在 Raycast 里一键查词翻译,聚合多家引擎,快人一步。

A Raycast Extension for looking up words or translating text in an easy way. Support···

★ 573 2026-08-09