ml-autofocusformer

让 Transformer 只算关键像素,分割边界更准更省算力

ml-autofocusformer 是 CVPR 2023 论文《AutoFocusFormer: Image Segmentation off the Grid》的官方实现。它针对传统视觉 Transformer 在规则网格上做下采样、导致小目标和细长物体边界信息丢失的问题,提出一种自适应下采样方案:模型根据图像内容动态选择保留哪些关键点,并在这些非规则点上执行局部注意力,从而让计算资源集中在信息量大的区域。项目覆盖 ImageNet 分类、ADE20K 语义分割和 COCO 实例分割任务,提供训练与评估脚本及预训练模型,基于 Python 与 PyTorch 实现。对于研究非网格视觉表示、稀疏注意力与高效分割的开发者,它是一个可直接复现论文结果的参考代码库。

开源 free 计算机视觉
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 126
维护状态 较活跃
是否开源 是
定价模式 free

项目预览

项目数据

分类计算机视觉
开发团队apple-aiml-research
所属国家
官网地址
定价模式free
价格说明开源代码,免费使用
访问状态
是否开源是
开源协议NOASSERTION
主要语言Python
技术栈/模型aff,autofocusformer,imagenet,object-classification,transformer
GitHub 星标★ 126
30天Star增速
HF 下载量
上线时间2023-05-11 00:00:00
最近更新2026-09-30 00:00:00
维护状态较活跃
中文支持
访问方式
移动端支持
综合评分
收录时间2026-10-01
浏览次数0

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

正在加载星标数据…

使用教程

核心亮点

  • 提出自适应下采样,按内容选择保留点,而非固定网格池化,对小目标和细长结构更友好
  • 在分类、语义分割、实例分割三类任务上均给出完整训练与评估代码,可复现论文结果
  • 官方实现,包含预训练权重与配置,省去从零搭建实验环境的成本

不足之处

  • 星标仅 126,属于早期小众项目,社区活跃度和第三方复现讨论有限
  • 自适应采样涉及非规则点操作,对自定义算子或特定 CUDA 环境有依赖,部署门槛高于常规 ViT

适用场景

  • 研究非网格视觉表示与稀疏注意力的论文复现实验
  • 在语义分割中提升小目标、细长物体边界的精度
  • 作为高效 Transformer 下采样模块,嵌入自有分割或检测模型

替代项目

SegFormer、Mask2Former、PVT

项目介绍

ml-autofocusformer 是计算机视觉领域的开源项目,由 apple-aiml-research 开发,2023 年首次发布。

它收录于计算机视觉分类,该分类目前共有 485 个项目,GitHub 星标数为 126。

项目保持着较活跃的维护节奏,最近一次代码更新于 2026-09-30。开源代码,免费使用。

它主要面向的使用场景是:研究非网格视觉表示与稀疏注意力的论文复现实验。同类可对比的替代方案包括 SegFormer、Mask2Former、PVT。

上一篇:Medical-SAM3

下一篇:platypus

同类项目推荐

modlens 开源

给纯文本编码代理装上眼睛,粘贴图片即刻获得结构化视觉证据。

The first vision plugin for DeepSeek Harness, and the vision bridge for every text-o···

★ 4071 2026-08-19
opencv 开源

开箱即用的视觉算法库,搞定图像视频处理与识别

Open Source Computer Vision Library

★ 91011 2026-08-10
DEIMv2 开源

用DINOv3做实时检测,又快又准,直接落地。

[DEIMv2] Real Time Object Detection Meets DINOv3

★ 2049 2026-08-14
OpenCVTutorials 开源

中文 OpenCV 教程,从入门到实战,边看边跑代码

OpenCV-Python4.1 中文文档

★ 1431 2026-08-20