Twitter 訓練神經網路裁剪照片 照片有喵星人也沒問題!

Twitter 訓練神經網路裁剪照片 照片有喵星人也沒問題!

▲(圖/翻攝自雷鋒網,下同)

【原文:《Twitter訓練神經網絡裁剪照片,照片有喵星人也不用怕了》,作者:李秀琴,智慧機器人網編輯整理】

 

文、圖/雷鋒網

雷鋒網(公眾號:雷鋒網)  1 月 26 日消息據外媒 The Verge 報導, Twitter 昨日發布部落格稱,其正在使用神經網絡來自動裁剪圖片、生成預覽縮略圖,從而讓用戶可以預覽到他們最感興趣的部分。

據了解,該公司一直在研究這個工具,機器學習研究員 Lucas Theis 和機器學習主管王澤漢(音譯, Zehan Wang )還在博客裡詳細描述了這個方法。雷鋒網了解到,王澤漢此前曾是倫敦機器學習和視覺處理技術開發商 Magic Pony Technology (MPT)的聯合創始人。 2016 年 6 月, Twitter 花費巨資將 MPT 收入麾下,隨後王澤漢也加入 Twitter 任職機器學習主管。

 

經 Theis 和 Wang 介紹,一開始他們僅用面部識別技術來裁剪面部圖像,但是後來他們發現這項技術並不適用於風景圖像,尤其是圖片中有貓的時候,因為 Twitter 總是會顯示圖像中心,這時出現在預覽圖裡的可能就是一隻喵星人的脖子。

 

就此,他們提出的解決方案是“使用顯著性裁剪”(這裡的“顯著性”即代表圖片中最有趣的區域——不管是面部還是其他事物)。經研究表明,在一張圖片裡,人們往往最關注面部、文字、動物和色彩對比度最高的區域。為了定義好這一點,他們將學術研究中的數據運用到眼球追踪裡,從而以紀錄人們首先看到的圖像區域。 Theis 和 Wang 在部落格中寫道:

「這些數據可以用來訓練神經網絡和其他算法,從而以預測人們可能會想看到的部分或內容。」

 

在這一技術下,他們研究的這一神經網絡可以在很短的時間內找到照片中最有趣的部分,用戶在上傳照片時也就不會發現延遲。當然,這一過程少不了對神經網路的優化。

 

另外,軟體工程師還使用了一種名為“知識精煉(knowledge distillation)”的技術來訓練算法,從而可快速估算照片中最顯著的部分。雖然其可能需要很長時間才能做出微調的像素級預測,但Twitter 的神經網絡可以提供快速而又更加相似的版本,從而讓用戶可以準時預覽照片。

 

對他們來說,最幸運的是——照片預覽所需的剪裁非常寬泛,只需將圖像縮小到最有趣區域的三分之一,最終的結果是可得到速度比原先快10 倍的神經網絡。

 

該功能目前正面向所有的 Twitter 用戶(包括 PC 、 iOS 和 Android 用戶)推出,其目的在於取代之前笨拙的預覽縮略圖。所以,下次如果你在 Twitter 上看到一個照片預覽並邀請你點擊時,記得感謝一下神經網絡的魔力。

【原文:《Twitter訓練神經網絡裁剪照片,照片有喵星人也不用怕了》,作者:李秀琴,智慧機器人網編輯整理】

延伸閱讀

果粉快筆記!靠這招解決蘋果死亡簡訊危機

【限】有仿生陰莖男性性愛機器人於 2018 問世 專家預測比按摩棒、假陽具更受歡迎

 

熱門標籤

留言

延伸閱讀