摘要：?2018飛天技術(shù)匯，阿里巴巴機(jī)器智能技術(shù)實(shí)驗(yàn)室的劉磊帶來(lái)題為全域精準(zhǔn)圖像搜索介紹的演講，主要從四個(gè)方面進(jìn)行了闡述，第一部分介紹了圖像搜索的基本概念，第二部分主要是講解了圖像搜索的技術(shù)架構(gòu)及其優(yōu)勢(shì)，第三部分對(duì)應(yīng)用場(chǎng)景及案例進(jìn)行了分析，最后對(duì)商品使用情況以及定價(jià)做了簡(jiǎn)單介紹。

2018飛天技術(shù)匯，阿里巴巴機(jī)器智能技術(shù)實(shí)驗(yàn)室的劉磊帶來(lái)題為全域精準(zhǔn)圖像搜索介紹的演講，主要從四個(gè)方面進(jìn)行了闡述，第一部分介紹了圖像搜索的基本概念，第二部分主要是講解了圖像搜索的技術(shù)架構(gòu)及其優(yōu)勢(shì)，第三部分對(duì)應(yīng)用場(chǎng)景及案例進(jìn)行了分析，最后對(duì)商品使用情況以及定價(jià)做了簡(jiǎn)單介紹。
數(shù)十款阿里云產(chǎn)品限時(shí)折扣中，趕快點(diǎn)擊這里，領(lǐng)券開(kāi)始云上實(shí)踐吧！
直播視頻回顧
PPT下載請(qǐng)點(diǎn)擊
以下是精彩視頻內(nèi)容整理：

Alibaba MIT

MIT （Machine , Intelligence ,Technologies 機(jī)器智能技術(shù)實(shí)驗(yàn)室） 成立于2018年，由一批杰出的科學(xué)家及工程師組成，團(tuán)隊(duì)主要分布在杭州、北京、西雅圖、硅谷、新加坡等地，是阿里巴巴負(fù)責(zé)人工智能技術(shù)研發(fā)的核心團(tuán)隊(duì)。MIT以阿里巴巴寶貴的海量數(shù)據(jù)為基礎(chǔ)，機(jī)器學(xué)習(xí)/深度學(xué)習(xí)技術(shù)為依托，打造了涵蓋圖像視頻、語(yǔ)音交互、自然語(yǔ)言理解、智能決策等人工智能核心技術(shù)，充分賦能電商、金融、物流、社交、娛樂(lè)等阿里巴巴集團(tuán)的重要業(yè)務(wù)，此外也對(duì)生態(tài)合作伙伴輸出，與企業(yè)合力打造智能未來(lái)。

圖像搜索

圖像搜索服務(wù)（Image Search）是一個(gè)以深度學(xué)習(xí)和大規(guī)模機(jī)器學(xué)習(xí)技術(shù)為核心，通過(guò)圖像識(shí)別和搜索功能，實(shí)現(xiàn)以圖搜圖的智能圖像搜索的產(chǎn)品。其主要的服務(wù)內(nèi)容包括相同圖像搜索和相似圖像搜索兩部分，在基于圖像識(shí)別技術(shù)的基礎(chǔ)上，圖像搜索服務(wù)結(jié)合了不同行業(yè)的應(yīng)用和業(yè)務(wù)場(chǎng)景，幫助用戶(hù)實(shí)現(xiàn)相同或相似的圖片搜索。圖像搜索的業(yè)務(wù)領(lǐng)域也較為廣泛，對(duì)于所有具備圖像數(shù)據(jù)庫(kù)的用戶(hù)都可以享受圖像搜索服務(wù)。
圖像搜索發(fā)展歷程主要分為三個(gè)階段，在2014年8月成功在淘寶的拍立淘上線(xiàn)，用戶(hù)第一次可以通過(guò)相機(jī)拍照的方式進(jìn)行購(gòu)物，在2017年2月開(kāi)始了產(chǎn)品的對(duì)外商業(yè)化輸出，將圖像搜索的技術(shù)分享給各大商業(yè)伙伴，今年開(kāi)始嘗試將圖像搜索技術(shù)在阿里云上進(jìn)行廣泛的賦能，并在7月份完成了圖像搜索在阿里云以及全球的同步發(fā)布。

技術(shù)架構(gòu)及其優(yōu)勢(shì)

圖像搜索技術(shù)主要分為五個(gè)算法模塊：

• 類(lèi)目預(yù)測(cè)：僅通過(guò)圖片特征進(jìn)行圖片的區(qū)分是有限制的，所以可以通過(guò)類(lèi)目的預(yù)測(cè)進(jìn)行目標(biāo)判斷，這樣就無(wú)需對(duì)整個(gè)圖像庫(kù)進(jìn)行全局搜索，只需搜索相應(yīng)的某個(gè)類(lèi)目圖片。類(lèi)目搜索不但可以提升搜索的效率，也可以提升搜索的精準(zhǔn)程度。

• 主體檢測(cè)：在一般情況下得到的圖片主體目標(biāo)較小并且背景較為復(fù)雜，為了減少背景以及其他主體的干擾，就需要進(jìn)行主體檢測(cè)。

• 特征提?。禾卣魈崛∈菆D像搜索的一個(gè)重要模塊，主要應(yīng)用了深度特征與局部特征兩個(gè)維度的特征，目前深度學(xué)習(xí)特征提取已經(jīng)遠(yuǎn)遠(yuǎn)優(yōu)于傳統(tǒng)的特征提取。局部特征提取是對(duì)圖像特征局部殊性的表達(dá)，目前在局部特征中進(jìn)行了包括維度壓縮、提取速度的優(yōu)化等方面的改進(jìn)。

• 檢索與排序：檢索索引主要分為離線(xiàn)構(gòu)建索引和在線(xiàn)快速查詢(xún)兩個(gè)模塊，離線(xiàn)構(gòu)建索引是通過(guò)離線(xiàn)過(guò)程對(duì)圖像特征進(jìn)行提取，在線(xiàn)過(guò)程主要是通過(guò)用戶(hù)輸入的特征圖片進(jìn)行快速提取特征，然后把提取出的特征放到分布式引擎中，進(jìn)行快速的查詢(xún)檢索。排序模塊能夠有效結(jié)合深度特征與局部特征，深度特征主要從高層來(lái)提取信息，而局部特征關(guān)注的是根據(jù)圖像的局部信息。

圖像搜索的技術(shù)流程

離線(xiàn)流程對(duì)圖像庫(kù)進(jìn)行圖像的選取，對(duì)選取后的圖像進(jìn)行主體檢測(cè)，然后對(duì)檢測(cè)后的圖像進(jìn)行特征提取，進(jìn)而建立起圖像檢索引擎。在線(xiàn)流程是在用戶(hù)輸入Query時(shí)，進(jìn)行類(lèi)目的預(yù)測(cè)和判斷，然后做主體檢測(cè)以及特征提取，進(jìn)行檢索和排序后，最后輸出結(jié)果。

圖像檢索的優(yōu)勢(shì)

深度學(xué)習(xí)采用業(yè)內(nèi)領(lǐng)先的深度學(xué)習(xí)算法和海量的數(shù)據(jù)，具有效果精準(zhǔn)、魯棒性強(qiáng)等優(yōu)點(diǎn)，并且自主研發(fā)支持百億數(shù)量級(jí)別的快速索引技術(shù)，時(shí)間可以達(dá)到毫秒級(jí)的響應(yīng)，同時(shí)產(chǎn)品全都是源于阿里巴巴電商平臺(tái)，經(jīng)歷實(shí)戰(zhàn)錘煉，所以具有可靠穩(wěn)定以及效果顯著的優(yōu)點(diǎn)。此外還可以針對(duì)不同的業(yè)務(wù)場(chǎng)景做一些定制化開(kāi)發(fā)，融合阿里云的計(jì)算和機(jī)器智能技術(shù)實(shí)驗(yàn)室的視覺(jué)AI的能力，打造充分適合用戶(hù)全業(yè)務(wù)場(chǎng)景的圖像搜索服務(wù)。

應(yīng)用場(chǎng)景及案例

電商場(chǎng)景

用戶(hù)只需拍攝或者上傳照片，就可以根據(jù)圖片進(jìn)行搜索。這省去了繁瑣的文字描述，簡(jiǎn)化了商品搜索流程，大大提高了用戶(hù)的購(gòu)物體驗(yàn)，同時(shí)對(duì)于商家而言也可以更快地將商品推薦給用戶(hù)。

通用圖庫(kù)場(chǎng)景

圖片分享和社交類(lèi)網(wǎng)站通常有大量的圖片供用戶(hù)搜索使用，利用圖像搜索服務(wù)，可在云端快速構(gòu)建百億級(jí)圖像搜索引擎，提供以圖搜圖功能，提升用戶(hù)體驗(yàn)。

案例

此案例是在三星Galaxy S8的系統(tǒng)中做了一個(gè)圖像搜索技術(shù)，在相冊(cè)中可以通過(guò)以圖搜圖的方式搜索到淘寶相關(guān)的商品，給客戶(hù)提供了更好地購(gòu)物搜索體驗(yàn)。

商用與定價(jià)

圖像搜索已于7月11日在國(guó)內(nèi)站和國(guó)際站同時(shí)商業(yè)化發(fā)布，得到客戶(hù)的廣泛好評(píng)。目前計(jì)費(fèi)方式有兩種，分別是預(yù)付資源包和后付費(fèi)。預(yù)付資源包是在圖像搜索服務(wù)采用購(gòu)買(mǎi)按月/按年（自然月/自然年）預(yù)付費(fèi)資源包的計(jì)費(fèi)方式。在購(gòu)買(mǎi)后，調(diào)用次數(shù)會(huì)在資源包內(nèi)進(jìn)行抵扣，當(dāng)資源包用完時(shí)，則默認(rèn)轉(zhuǎn)到后付費(fèi)方式。同時(shí)預(yù)付費(fèi)資源包采取按照資源包調(diào)用量大小及資源包購(gòu)買(mǎi)期長(zhǎng)短進(jìn)行階梯優(yōu)惠的付費(fèi)方式，資源包的調(diào)用量越大/資源包的購(gòu)買(mǎi)期越長(zhǎng)（如：選擇包年而非包月）即單價(jià)越低。而后付費(fèi)是在圖像搜索服務(wù)的預(yù)付費(fèi)資源包用完后，默認(rèn)轉(zhuǎn)到后付費(fèi)方式，后付費(fèi)的計(jì)費(fèi)方式為按次計(jì)費(fèi)。

閱讀原文

本文為云棲社區(qū)原創(chuàng)內(nèi)容，未經(jīng)允許不得轉(zhuǎn)載。