“AI文案大師”讓朋友圈更有“范”-
作者:鄭金武
發布時間:2021-05-06
瀏覽次數:1601
“AI文案大師”讓朋友圈更有“范”-

本報訊?日前,北京智源人工智能研究院(簡稱智源研究院)悟道文瀾團隊發布“AI 文案大師”小程序,可以自動匹配生成相應的文案。

據介紹,“AI 文案大師”小程序可以實現“輸入一張圖片,輸出一句文案”的功能。在這個過程中,“圖片”“文本”兩種數據分別對應于“視覺”和“語言”兩種模態。

機器學習領域將這種輸入輸出數據分別屬于不同模態的任務稱為“跨模態”任務。例如,可以訓練模型根據輸入圖片中提取出的視覺信息,自由地生成相應的描述性自然語言文本,這樣的任務稱為“圖像描述”。此外,還可以把圖片作為輸入,提取其視覺特征,并在現有的文本庫中檢索最符合圖片特征的文字描述,這樣的任務稱為“圖文檢索”或“圖文匹配”。

智源研究院悟道文瀾團隊相關負責人表示,“視覺—語言”多模態預訓練有助于提取到兩種模態數據中的關鍵信息,從而實現更高質量的圖文匹配。為了實現“AI文案大師”系統要求的圖文匹配質量,需要提升神經網絡的表征能力。

得益于近年來自監督學習在提取數據內在關鍵知識方面的進展,智源研究院悟道文瀾團隊采用先進的跨模態對比學習(自監督學習算法中的一種)算法 CMCL,利用某一個“圖文對”中的圖像模態或文本模態來構建該“圖文對”的負樣本,并設計了一種基于隊列的詞典來擴大負樣本數目,從而得到更好的數據表征。

未來,智源研究院悟道文瀾團隊還將繼續發布各種基于大規模中文多模態預訓練模型的研究成果和有趣應用。(鄭金武)

向陽的花,努力生長,總會綻放,

心有所愛,有所期待,

剩下的就是努力扎根,

努力生長,靜待花開!

“AI 文案大師”演示的“圖文匹配”實例

《中國科學報》 (2021-05-06 第3版 信息技術)


關注【深圳科普】微信公眾號,在對話框:
回復【最新活動】,了解近期科普活動
回復【科普行】,了解最新深圳科普行活動
回復【研學營】,了解最新科普研學營
回復【科普課堂】,了解最新科普課堂
回復【科普書籍】,了解最新科普書籍
回復【團體定制】,了解最新團體定制活動
回復【科普基地】,了解深圳科普基地詳情
回復【觀鳥知識】,學習觀鳥相關科普知識
回復【博物學院】,了解更多博物學院活動詳情

聽說,打賞我的人最后都找到了真愛。
色依依国内精品中文字幕|国产精品嫩草影院免费观看|亚洲ⅤA制服丝袜一区二区|久久精品无码一级毛片温泉|无码专区亚洲综合另类