cross-modal alignment

多模態學習的相圖

這篇論文把多模態訓練分成四種情境，說明何時該做對齊、何時該做跨模態預測，何時兩者都不該做。