ml-autofocusformer

让 Transformer 只算关键像素,分割边界更准更省算力

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 计算机视觉 🍴 复刻 10 👀 关注 6
GitHub ↗
GitHub 星标 ★ 126
维护状态 维护中
是否开源 开源
定价模式 🏷️完全免费 开源代码,免费使用

项目预览

ml-autofocusformer 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类计算机视觉
开发团队apple-aiml-research
定价模式🏷️完全免费
价格说明开源代码,免费使用
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议NOASSERTION
主要语言Python
技术栈/模型aff,autofocusformer,imagenet,object-classification,transformer
GitHub 星标★ 126
上线时间2023-05-11 00:00:00
代码更新2026-09-11
仓库体积8.3 MB
本站数据更新2026-11-15
维护状态维护中
收录时间2026-10-01
浏览次数2

项目介绍

ml-autofocusformer 是 CVPR 2023 论文《AutoFocusFormer: Image Segmentation off the Grid》的官方实现。它针对传统视觉 Transformer 在规则网格上做下采样、导致小目标和细长物体边界信息丢失的问题,提出一种自适应下采样方案:模型根据图像内容动态选择保留哪些关键点,并在这些非规则点上执行局部注意力,从而让计算资源集中在信息量大的区域。项目覆盖 ImageNet 分类、ADE20K 语义分割和 COCO 实例分割任务,提供训练与评估脚本及预训练模型,基于 Python 与 PyTorch 实现。对于研究非网格视觉表示、稀疏注意力与高效分割的开发者,它是一个可直接复现论文结果的参考代码库。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-10-01 · 当前星标 ★ 126

技术标签

核心亮点

  • 提出自适应下采样,按内容选择保留点,而非固定网格池化,对小目标和细长结构更友好
  • 在分类、语义分割、实例分割三类任务上均给出完整训练与评估代码,可复现论文结果
  • 官方实现,包含预训练权重与配置,省去从零搭建实验环境的成本

不足之处

  • 星标仅 126,属于早期小众项目,社区活跃度和第三方复现讨论有限
  • 自适应采样涉及非规则点操作,对自定义算子或特定 CUDA 环境有依赖,部署门槛高于常规 ViT

适用场景

  • 研究非网格视觉表示与稀疏注意力的论文复现实验
  • 在语义分割中提升小目标、细长物体边界的精度
  • 作为高效 Transformer 下采样模块,嵌入自有分割或检测模型

替代项目

SegFormer、Mask2Former、PVT

上一篇:Medical-SAM3

下一篇:platypus

同类项目推荐

tessdoc 开源

Tesseract 官方文档一站查,装、调、训不再翻论坛

Tesseract documentation

★ 2458 2026-09-19
Pair-VPR 开源

用视觉Transformer让机器人认路更准,不怕光照季节变化

[IEEE RA-L 2025] The official repository for Pair-VPR: Place-Aware Pre-training and ···

★ 67 2026-08-09
CLIP-API-service 开源

把 CLIP 模型变成一行代码就能调用的 API,快速实现图文搜索与识别。

CLIP as a service - Embed image and sentences, object recognition, visual reasoning,···

★ 67 2026-08-09
MultimodalOCR 开源

用29项细粒度任务,测出多模态大模型的OCR真实水平

On the Hidden Mystery of OCR in Large Multimodal Models (OCRBench)

★ 903 2026-09-29
Awesome-MLLM-Segmentation 开源

一页看懂 MLLM 做图像视频分割的全部代表论文

A curated list of publications on image and video segmentation leveraging Multimodal···

★ 239 2026-09-15
LIGHT 开源

无需分类器,轻松生成自然的人-物交互3D动画

[ICLR 2026] Unleashing Guidance Without Classifiers for Human-Object Interaction Ani···

★ 63 2026-08-09
marigold-v2 开源

单张图生成稠密深度图,细节边缘更稳

Marigold V2: Revisiting Diffusion Transformers for Monocular Depth Estimation

★ 964 2026-10-29