寻隐(英文版叫 Queryable) 是一款 iOS 相册应用,它通过运行在本地的 Core ML 模型,实现了自然语言搜索相册照片,比如公园躺椅上的白色小猫、粉色的天空,或者任何你想到的能够描述这张照片的语言。并且不联网,完全运行在本地,保护你的隐私。
GitHub – mazzzystar/Queryable: Run OpenAI’s CLIP and Apple’s MobileCLIP model on iOS to search photos.
Run OpenAI’s CLIP and Apple’s MobileCLIP model on iOS to search photos. – mazzzystar/Queryable
寻隐 – 用文字找照片(基于 OpenAI CILP 模型的语义图片搜索)
使用自训练的 OpenAI CLIP 模型,支持中文并裁剪模型大小。看起来搜索效果比 iOS 自带的相册搜索更好。为保障隐私,索引和搜索过程完全离线。
说起来,虽然大家保存照片到 NAS 中,但想从海量的数字照片中寻找想要的,还停留在人脸、时间线、地理位置、手动创建的相册上,主要是时间线和地理位置,只需要记得照片拍摄的大致时间,总能翻出来。
只是,有时候如果想要找一张很特殊的照片,可能需要翻很久…
寻隐能实现的,就是任何你能想到的描述语句,输入,然后它帮你找照片。
先来看视频:
比如:
- 公园里的白色猫咪
- 蓝色天空中的风筝
- 夜晚的房间
- 夜晚的房间,有一盏灯
这就很厉害了,你的历史照片,终于可以在 1 秒内就翻出想要的那一张了。
寻隐内置了模型,尺寸还好,没微信大,就 240MB,运行之后就是扫描所有照片,需要几分钟的时间。然后就能搜索了。
搜索的速度非常快,大概在 2 秒内就能出结果。结果也不是 100%符合描述,但比相册自带好上好多倍了,非常赞。
获取
Photo Finder App – Queryable
Queryable is an MacOS app that allows you to find a photo in albums use a text description, completely offline. – Note: Currently, only photos in photo albums are available for search. 1. What’s the highlights ? – You can use any description you remember to find the photo.