尋隱(用文字找照片)

尋隱方便個(gè)人用戶在手機(jī)上面完成對(duì)于照片的查找服務(wù)，通過這款尋隱來尋找照片內(nèi)容，并且以文字的方式來對(duì)圖片進(jìn)行識(shí)別，相比于一些OCR的圖片文字識(shí)別內(nèi)容，它能夠直接的提取照片當(dāng)中的場(chǎng)景來輔助你進(jìn)行照片的識(shí)別，快來西西下載這款尋隱！

尋隱

尋隱是一個(gè)完全運(yùn)行在本地的CoreML模型，它可以使你以任意文字搜索相冊(cè)里的照片。

相關(guān)介紹

一. 它的優(yōu)勢(shì)？

你可以用任何你能想到的描述性的文字來尋找某張照片，可以是一個(gè)場(chǎng)景(如：“雨中漫步”)、一種色彩("漆黑房間里的橘色臺(tái)燈")、一個(gè)物體的動(dòng)作("小狗張嘴巴")，甚至是照片中傳達(dá)的情感("我們戀愛啦")。

而這一切，完全離線(無網(wǎng)絡(luò)連接)進(jìn)行，尋隱在乎你的相冊(cè)隱私。

二. 我該如何使用它？

第一次運(yùn)行時(shí)，尋隱需要為你的相冊(cè)構(gòu)建索引(記得授權(quán)它能訪問全部相冊(cè))，這通常需要花費(fèi)幾分鐘(取決于你的照片數(shù)量)，處理速度在~2000張/分鐘左右。

完成構(gòu)建后，你可以以任何你喜歡的描述來尋找照片。當(dāng)你有新照片時(shí)，你可以輕易地手動(dòng)更新索引以將它們加入搜索范圍。

三. 我的相冊(cè)隱私怎么辦？

尋隱被設(shè)計(jì)成可以運(yùn)行在無網(wǎng)絡(luò)環(huán)境，你甚至可以關(guān)閉它的網(wǎng)絡(luò)權(quán)限，這意味著它毫無可能將您的照片上傳到任何設(shè)備以外的地方，因此你可以相信使用它不會(huì)有隱私風(fēng)險(xiǎn)。

在最新版本，尋隱增加了「允許用戶設(shè)置聯(lián)網(wǎng)以下載iCloud圖片」的選項(xiàng)：當(dāng)照片僅存儲(chǔ)在iCloud上，你可以允許尋隱聯(lián)網(wǎng)使用官方api下載原圖。當(dāng)然，這并非強(qiáng)制。

四. 有設(shè)備和系統(tǒng)要求嗎？

有。尋隱在本地運(yùn)行CoreML模型，這意味著如果你的設(shè)備不支持，運(yùn)行會(huì)崩潰、或搜索結(jié)果異常。

限制條件如下：

* iOS 16.0 以上系統(tǒng)

* iPhone 11 或以上機(jī)型

* 還未在Mac或iPad上測(cè)試過效果

五. 存儲(chǔ)在iCloud上的照片

如上所述，尋隱試圖在無任何網(wǎng)絡(luò)連接的情形下運(yùn)行。如果你的照片完全存儲(chǔ)在本地，你不會(huì)遇到任何問題。當(dāng)你的部分照片僅存儲(chǔ)在iCloud上(本地只有低清緩存)時(shí)，你可以選擇允許尋隱訪問網(wǎng)絡(luò)以從iCloud下載原始照片，你也可以依據(jù)日期信息，手動(dòng)在相冊(cè)定位到這張照片。

相關(guān)新聞

從上面流程圖可知，在 iOS 上運(yùn)行 CLIP，需要將你的相冊(cè)全部照片經(jīng)過 CLIP 計(jì)算圖像向量。那么，憑什么讓用戶信任你不會(huì)偷偷存儲(chǔ)、上傳他的照片呢？所以我希望這個(gè) app 完全離線。因此我在開發(fā) app 的時(shí)候，摒棄了一切需要網(wǎng)絡(luò)請(qǐng)求的場(chǎng)景，也就與翻譯 API 無緣了。

但是，當(dāng)用戶的圖片只存儲(chǔ)在 iCloud 時(shí)，本地就必須使用網(wǎng)絡(luò)來下載存儲(chǔ)在 iCloud 上的高清圖片。我在第一個(gè)版本拒絕妥協(xié)，選擇提供了照片的拍攝日期：用戶可以通過日期信息手動(dòng)去相冊(cè)定位到這張圖，然后從 iCloud 下載。

但這樣其實(shí)非常不方便，所以我在第二個(gè)版本提供了允許用戶主動(dòng)選擇聯(lián)網(wǎng)來從 iCloud 下載原圖，這個(gè)入口非常深：只有當(dāng)搜索結(jié)果的照片確實(shí)存儲(chǔ)在 iCloud，并且你點(diǎn)擊下載時(shí)，才會(huì)彈出聯(lián)網(wǎng)請(qǐng)求，此時(shí)你仍然可以拒絕，仍可以繼續(xù)流暢使用它。