作者工具 · 找回已有素材

忘了文件名,还能按画面找回照片和视频吗?

SCM 给 Mac 上已有的照片和视频加上内容检索:找文件、跳到片段、查画面文字与对白分别处理。沿作者的公开结果,看先索引再找回的办法和使用条件。

依据作者 10 月 4 日的固定版本说明、视频代码与公开演示。本站未安装,也没有中文检索或私人图库实测。

SCM 的 Files 模式以 music 检索音乐相关图片,顶部保留查询和模型选择。
作者 Files 演示约 7.5 秒的完整原帧,示例选择 SigLIP-2-B/16;README 默认是 CLIP,两者分开理解。图中的查询与图库来自作者演示。 · 打开大图
本文目录4 个章节

EN

记得内容,也能成为找文件的起点

SCM(Screen Memories)给 Mac 里已有的照片和视频加了内容搜索。作者的 Files 演示输入 music,结果里出现播放器、耳机和唱片图片;这一模式结合画面相似度、文件名与词语线索。它交回的是可以打开的文件,适合记得内容、却想不起原文件名的时候。

来源与延伸阅读

EN

找视频,也可以跳到某个片段

Scenes 把检索结果标成带时间点的片段。代码先找切镜边界,按片段预算选取代表画面,用各段中间帧建索引;没有切镜结果时,改用等间隔取样。打开结果便跳到对应位置。这让一段画面成为入口,检索用的仍是代表帧,不是把整片每一帧都解释过。

SCM 作者演示打开电影片段,顶部显示已跳到场景 2:38。
作者 Scenes 演示约 4.5 秒原帧;画面中的 2:38 是被打开影片的时间点,不是演示 GIF 的播放时间。 · 打开大图
来源与延伸阅读

EN

画面文字、对白和聊天,分别取证

OCR 查画面里识别出的字;Dialogue 查 Whisper 转录的说话内容,默认 tiny.en,可选 base.en,都是英语模型。中文 OCR 的语言包不能证明中文对白效果。另一个可选 Ask 模式只根据已经提取的对白、OCR 文字与文件名线索回答,并附引用;仍可以点回材料核对。

来源与延伸阅读

EN

先给模型和媒体副本留出空间

作者提供的 Homebrew 安装面向 Apple Silicon、macOS 12 及以上。首次下载默认 CLIP 权重约 435 MB,语音或可选聊天还需各自模型;导入的媒体会复制进应用资料库,索引、缩略图和片段也占空间。说明称推理在 Mac 上完成。想研究它,可先用少量熟悉素材,看看结果是否符合自己的找回习惯。

来源与延伸阅读

把这些变化放在一起看