多模態知識圖譜(MMKG)儲存了包含豐富多模態描述資訊結構化世界知識。 為了克服其固有的不完整性,多模態知識圖譜補全(MMKGC)旨在利用三元組的結構資訊和 實體的多模態訊息,從給定的多模態知識圖譜中發現未觀察到的知識。 現有的 MMKGC 方法通常使用預先訓練好的模型來提取多模態特徵,並採用融合模組將多模 態特徵與三元組預測結合。然而,這往往導致對多模態資料的粗略處理,忽略了細微、精 細的語義細節及其相互作用。 為了解決這一不足,我們引入了一個新穎的框架 MyGO ,用於處理、融合和增強 MMKG 的細粒度模態資訊。MyGO 將多模態原始資料標記為細粒度的離散標記,並 透過跨模態實體編碼器學習實體表徵。為了進一步增強多模態表徵,MyGO 採用了 細粒度對比學習技術,以突顯實體表徵的特殊性。 arxiv : https://arxiv.org/abs/2402.05391 github : https://github.com/zjukg/MyGO 我是沒想到連這個也會GO 然後提醒一下 這論文是認真做的 不是搞耍 不要去人家的issues亂 https://i.imgur.com/ech1Oji.png
-- https://i.imgur.com/sFomUdG.png
我永遠喜歡白佳貞學姊 -- ※ 發信站: 批踢踢實業坊(pttsite.org.tw), 來自: 49.213.199.89 (臺灣) ※ 文章網址: https://pttsite.org.tw/C_Chat/M.1713517863.A.FA4
emptie: 中國人素質 04/19 17:18
ilove640: 這沒啥吧 我記得也看過老外玩薩爾達梗 04/19 17:27
lay10521: 白佳貞好像沒啥戲份欸 04/19 18:01
shikemurajy: 你論文貼錯篇了吧 04/19 18:09
shikemurajy: 你貼到他另一篇的survey paper 04/19 18:09
schlemm: 有人包養過洋鬼子嗎 04/19 18:09
shikemurajy: 而且硬要縮寫成MyGO欸,病得不輕 04/19 18:10
shikemurajy: 這篇很認真欸 要投AMC MM的會議欸 04/19 18:11
shikemurajy: *ACM MM 04/19 18:12