制御可能な相互情報量を持つ多モーダルデータセット

本記事では、モーダル間の相互情報量が明示的に計算可能な多モーダルデータセットを生成するフレームワークを紹介しています。このフレームワークを利用することで、相互情報量の推定器や多モーダル自己教師あり学習手法の体系的な研究における新たなテストベッドとなるベンチマークデータセットを構築できます。本研究では、流れに基づく生成モデルと、相関のある潜在変数を生成するための構造的因果フレームワークを使用して、既知の相互情報量を持つリアルなデータセットを構築する方法を説明しています。