涂鴉式搜圖

用文字搜索引擎來找圖片，終歸像是檔案翻檢。用畫在破紙上的線條草稿來搜圖片，才是圖片搜索的王道。

在Marc的文案中，表現家庭聚會主題的配圖上還差一只撒歡的狗，他打算在谷歌上找一只，然后用Photoshop合成。在谷歌搜索的對話框中，敲入“dog jump”的關鍵字，逐頁瀏覽，直到8、9頁的時候，Marc失去了耐性。

搜索結果令他哭笑不得，有一只滿臉無辜的狗原地不動地看著鏡頭，因為“jump”是它的名字;另一張圖片是一組建筑物，完全沒有狗這個主角，在圖片來源中能發現，圖片是某只狗跳出窗外自殺的案發現場。究竟哪里出了岔子?

用一個暗示搜圖片

Marc的主要工作是文案設計，用了14年Photoshop，經常處理一些圖文并茂的文案。在澳大利亞的蘋果論壇(MacTalk)上混了4年的Marc發現了一款圖片搜索工具，與他慣常使用的用文字找圖的谷歌不同，這款Sketch2photo采取的作法是“用圖找圖”。

Marc是通過一段視頻和一篇10頁的論文才了解到它的使用方法的。然而，在清華大學計算機科學與技術系可視媒體研究中心的服務器上， 我們能找到Sketch2photo的試用版。“讓計算機去識別圖像是一件很難的事情，我們希望能夠找到解決的方法?！盨ketch2photo研發小組的兩名技術人員程明明和陳韜說。

讓Marc意外的是，Sketch2photo動態教學里的例子就是一只銜著飛盤跳躍的狗，在類似畫圖工具的白屏上，用鼠標畫一個橢圓形，再畫一個狗的輪廓，輸入標簽，也就是給你的輪廓命名“frisbee”和“dog jump”，一張角度、高度適中的拉布拉多銜飛盤的圖片在第一頁就出現了，如果想要加棵樹或者加個人做背景，那也不過是加幾個英文單詞、畫幾個多邊形的事兒。

在一段文字當中找“人”這一個字很簡單，因為人能讀懂的文字背后是計算機也認得的代碼，但是在一堆圖中找有人的就完全不一樣了，計算機的眼里只看得到數據和文字，圖像卻無法跟關鍵字匹配。然而在程明明看來，只要寫一段設定好的程序，就能實現用戶眼中神秘的以圖找圖的功能，這是因為“計算機識別圖像是根據圖片上每一個點的位置上的顏色值”。

相較之前的海量找圖，Marc認為，Sketch2photo這種用輪廓換圖片的方法簡直就是全自動的，但是研發成員的真正用意是—人機交互。“我們其實不想完全依靠計算機把圖片找到，而是希望能在這里加入一些人機互動的環節。人需要首先給計算機一個很簡單的提示，說想要一個什么樣的輪廓，比如一只狗，它是跳起來的還是蹲在那里的，然后計算機去完成搜索任務?！?/p>

再會畫畫也白搭

身為設計師的M a r c ， 當然不會像Sketch2photo動態教學中的例子那樣，畫一根直線就當作狗尾巴了，他會精心繪制一條比例得當、粗細適中、毛絨感真實的尾巴，但是在Sketch2photo研發過程中的實驗證明，用戶再會畫畫也白搭。

用Sketch2photo搜索新郎和新娘在夕照中擁吻的圖片，藝術家或者插畫師花大半天勾勒出婚紗的頭紗、裙擺，新郎的燕尾服，而三歲小孩花兩秒畫一個等腰梯形，只要他們都給這個梯形一個“wedding kiss”的標簽，就很可能找到的是同一張圖。“Sketch2photo結合了之前計算機基于文字搜索的已有成果，加上我們設計的用輪廓找圖的方法，以及計算機依據顏色值尋找目標圖片的手段，才給出用戶最終結果?！?/p>

以前，Marc用Photoshop摳圖，放在需要的背景里，圖層混合、執行濾鏡、描邊、扭曲、旋轉等等進行圖片合成這些經常要熬夜的工作，在Sketch2photo這邊，都交給計算機來做行了，用戶要做的就是把腦海中的圖片畫成若干個由輪廓組成的草圖上傳就可以了。

“我們得到的其實是無數張新郎、新娘，無數張夕陽的圖片，然后按照用戶輸入的英文標簽，找到最優化的匹配，把這些圖摳出來，再進行合成，但是這個過程人是看不見的，由計算機自動完成了?！?/p>

“除了輪廓，用戶甚至還可以上傳一張樣圖?！盨ketch2photo會根據這張樣例的實圖，找出更多類似的圖片。如果還想加上海鷗、帆船做遠景，那么就在已經找到的實圖上再加一些輪廓，再上傳。

創意與搜索引擎共進化

當年一款“光影魔術手”圖片處理軟件，解救了一批Photoshop的初級玩家，讓他們也可以隨意制造出LOMO和反轉片的效果?，F在，Sketch2photo則把對圖片有需求的用戶，從海量圖庫中解救出來。

服務器下載圖片和完成摳圖，再做出前景后景分析等預處理之后，保存下經過處理的圖片網址，就等著用戶上門了。不管是輪廓還是樣圖，即使用戶是好萊塢的名導，也能得到一個滿意的答復。

當年的執導《泰坦尼克號》的詹姆斯卡梅隆曾用手繪的方式呈現電影十幾個主要場景的分鏡頭，如果用Sketch2photo來完成這些工作，或許他就不用管素描的陰影和角度，只需勾出幾個輪廓就可以了。即使對搜索結果不滿意，只需在樣圖上加工就好了，那樣也絕不會導致電影的拍攝超時、超支。

用Sketch2photo找圖的過程，同時也是用戶想法的加工工程，在勾勒出每一個單一輪廓后，Sketch2photo會通過排列組合給出意想不到的結果。

不過，Sketch2photo現階段仍然只適合比較簡單的場景，“如果要找某個明星，那還是用文字搜索快，除非你把名字給忘記了”。