人民大学の最新研究:データ拡張とコントラスト学習

人民大学の最新研究によると、データ拡張がコントラスト学習において複雑な役割を果たしていることが分かりました。正例を強く一致させることは必ずしも有利ではなく、より強力なデータ拡張は下流タスクの性能を向上させる一方で、一致性能を損なう可能性があります。

この研究では、情報理論とスペクトル解析の観点からデータ拡張戦略を提案しています。