天体画像とスペクトルの効率的な統合手法

視覚とスペクトルの独立した基盤モデルを軽量にアライメントするDINOspecを開発した。

• 画像とスペクトルの表現を統合する枠組みDINOspecを提案した。
• エンコーダを固定したまま軽量なアダプタと対照学習でアライメントを行った。
• 銀河の形態分類やスペクトル分類のタスクで性能向上が見られた。
• 科学用基盤モデルを効率的に組み合わせる新たな可能性を示した。

原文タイトル: DINOspec: Efficient Multimodal Alignment of Vision and Spectral Foundation Models for Astronomy

arXiv で原文を見る

この要約は AI が生成したものであり、arXiv および論文著者の見解ではありません。