dsh-see-now

只传变化的画面,让 AI 看屏几乎不花 token

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 自动化工作流 🍴 复刻 60 👀 关注 1
GitHub ↗
GitHub 星标 ★ 588
维护状态 活跃
是否开源 开源
定价模式 🏷️完全免费 开源免费,无付费计划

项目预览

dsh-see-now 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类自动化工作流
开发团队SAOS-3624
定价模式🏷️完全免费
价格说明开源免费,无付费计划
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议Apache-2.0
主要语言JavaScript
技术栈/模型ai-agent,dsh,dsh-plugin,ffmpeg,llm,realtime,screen-capture,token-efficient,vision
GitHub 星标★ 588
上线时间2026-11-01 00:00:00
代码更新2026-11-11
仓库体积9.4 MB
本站数据更新2026-11-12
维护状态活跃
收录时间2026-11-12
浏览次数0

项目介绍

dsh-see-now 是一个面向 AI 智能体的屏幕实时感知插件,解决大模型无法持续「看见」用户屏幕、而逐帧截图又极其消耗 token 的问题。它通过 ffmpeg 采集屏幕画面,按画面变化量筛选关键帧,只保留真正发生变化的时刻,再把多帧拼接成一张图送入视觉模型,从而在静止画面下几乎不产生 token 消耗。核心能力包括:屏幕捕获与变化检测、关键帧筛选、多帧拼图压缩、与 dsh 插件体系及 AI 智能体工作流集成。适合需要让 AI 持续观察桌面操作、辅助自动化任务或实时理解界面状态的场景,用较低成本换取接近连续的视觉输入。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-11-12 · 当前星标 ★ 588

核心亮点

  • 按变化量筛选帧,静止画面几乎零 token 消耗,成本控制思路清晰
  • 多帧拼成单图送入视觉模型,一次请求覆盖多个时间点,减少调用次数
  • 基于 ffmpeg 做屏幕捕获,跨平台基础成熟,依赖轻量

不足之处

  • 早期项目,星标与生态尚小,长期维护和兼容性待观察
  • 变化阈值等参数需要手动调,不同场景下效果差异可能较大
  • 拼图会降低单帧分辨率,细小文字或控件变化可能识别不准

适用场景

  • 让 AI 助手持续观察桌面操作并给出实时指导
  • 自动化流程中监控界面状态变化并触发后续动作
  • 录屏式任务复盘,把关键画面压缩后交给模型总结

替代项目

Open Interpreter、UFO、screenpipe

上一篇:manjusaka

下一篇:dsh-game-studio

同类项目推荐

OpenBrowser 开源

一键创建多个隔离指纹浏览器环境,配合代理和RPA,轻松管理多账号。

本地指纹浏览器 · 多环境隔离 · 代理 / 指纹 / 同步 / RPA

★ 792 2026-09-07
livecontext-ce 开源

用聊天描述任务,自动生成可用的 AI 工作流和代理。

The AI automation platform, self-hosted. Describe the job in chat and LiveContext bu···

★ 782 2026-08-09
comfyui-workflow-versatile 开源

导入即用,一键搞定文生图、图生图、重绘和扩图

A general purpose ComfyUI workflow for common use cases.

★ 65 2026-08-09
career-ops 开源

在命令行里用 AI 自动筛职位、改简历、跟踪申请

Open-source AI job search agent and job finder: scan job boards, score each job 1-5 ···

★ 81882 2026-08-09
career-ops 开源

在命令行里用 AI 自动筛选职位、定制简历,求职效率翻倍

Open-source AI job search agent and job finder: scan job boards, score each job 1-5 ···

★ 81882 2026-09-02
Douyin_TikTok_Download_API 开源

一条命令部署,批量抓取三大平台无水印视频

自托管的抖音、TikTok、B 站数据采集与无水印视频下载 API,支持 AI agent 通过 MCP 调用与···

★ 21354 2026-10-23
ghidra-cli 开源

终端跑 Ghidra,JSON 喂给 AI,逆向自动化一步到位

Automate Ghidra reverse engineering from the command line — headless analysis, deco···

★ 267 2026-08-09
ComfyUIMini 开源

手机上轻松跑 ComfyUI 工作流,随时随地出图

A mobile-friendly WebUI to run ComfyUI workflows.

★ 390 2026-08-09