arXiv雑要約
画像・音声 - 2026/05/14 公開
経食道心エコー画像を用いた強固かつ説明可能な二尖弁大動脈狭窄症診断:スタックドアンサンブルの活用 [cs.LG, cs.AI, cs.CV]目的:二尖弁大動脈狭窄症と三尖弁大動脈狭窄症の識別
- 二尖弁大動脈狭窄症は,心臓弁膜症の中でも比較的多く,早期発見と適切な治療が重要である。
- 診断精度は,検査者の熟練度や画像品質に左右されるため,客観的な診断支援システムの開発が求められている。
- 日常的に撮影される心エコー画像から,高精度かつ透明性の高い診断支援を実現することを目指す。
- スタックドアンサンブルモデルは,外側交差検証においてF1スコア0.907,再現率0.877を達成し,高い診断性能を示した。
- フレームレベルのGrad-CAM解析により,大動脈根部や弁葉面といった重要な領域が可視化された。
- SHAP値の集計により,各ビデオバックボーンの予測への貢献度を定量化し,透明性の高い監査を可能にした。
LEXI-SG:ルーム誘導再構成による単眼3Dシーングラフマッピング [cs.RO, cs.CV]目的:単眼RGB画像のみを用いたオープンボキャブラリ3Dシーングラフの構築
- ロボットナビゲーションにおいて,階層的な幾何学的・意味的理解を提供するシーングラフが標準的な表現となっている。
- 既存のシーングラフマッピング手法は,深度カメラやLiDARセンサーに依存しているものが多く,単眼カメラでの実現が課題であった。
- 単眼RGB画像のみで,大規模かつ高精度なオープンボキャブラリ3Dシーングラフを構築し,ロボットナビゲーションの性能向上を目指す。
- LEXI-SGは,単眼カメラ入力のみでオープンボキャブラリ3Dシーングラフを構築する初の高密度ビジュアルマッピングシステムである。
- ルームベースのファクターグラフを用いてグローバルなアライメントを行い,局所的なマップの一貫性を維持し,意味的なシーングラフ階層を自然に表現している。
- Habitat-Matterport 3Dやオフィスシーケンスでの検証により,軌道推定と高密度再構成の精度が向上し,オープンボキャブラリセグメンテーションにおいても競争力のある性能を示した。
データ対称性とのネットワーク不変性の整合:画像復元のための理論的枠組みと適応的アプローチ [cs.CV]目的:画像復元におけるデータ対称性とネットワーク不変性の整合
- 画像復元は,難解な逆問題を解決する上で重要であり,幾何学的対称性に基づく不変ネットワークは性能向上に貢献する。
- 既存研究では,ネットワーク不変性とデータ対称性の関係が十分に解明されておらず,不完全な対称性を持つ現実世界のデータへの適用が課題である。
- データセットレベルでの対称性の定量的な定義に基づき,画像復元における不変性を最適化し,汎化性能を向上させることを目指す。
- データ対称性誤差と離散化メッシュサイズによって最適復元演算子の不変性誤差が厳密に制限されることを理論的に証明した。
- 不変性とデータ対称性の整合がバイアス・バリアンスのトレードオフを最適化し,総期待リスクを最小化することを示した。
- サンプル固有の対称性に合わせて動的に整合するサンプル適応不変ネットワークを提案し,超解像度,ノイズ除去,雨除去タスクで優れた性能を発揮した。
弱教師あり時空間異常検知 [cs.CV, cs.AI]目的:時空間異常検知手法
- 監視カメラ等の映像解析において,異常行動の自動検出は重要である。
- 動画へのアノテーション作業はコストが高く,大規模なデータセットの作成が困難である。
- 弱教師あり学習を用いて,アノテーションコストを削減し,異常検知を実現する。
- 提案手法では,動画レベルのラベルのみを用いて,時空間領域の異常スコアを算出する。
- 複数インスタンスランキング損失(MIL)を用いて,正常/異常動画を袋としてモデル化する。
- UCF Crime2Localデータセットで実験を行い,有効性を示す。
Min一般化スライス・グロモフ・ワッサースタイン距離:スケーラブルなグロモフ・ワッサースタイン距離への道 [cs.LG, cs.CV]目的:グロモフ・ワッサースタイン距離問題に対する,表現力豊かな一般化スライサーを用いたスライス化された定式
- 幾何学的な形状解析や対応付けにおいて,形状間の距離を定量的に評価する重要性が高まっている。
- 従来のグロモフ・ワッサースタイン距離の計算は,計算コストが高く,大規模データへの適用が困難である。
- 計算効率を向上させつつ,幾何学的な構造を捉えた形状間の距離評価を実現すること。
- 提案手法min-GSGWは,既存のグロモフ・ワッサースタイン距離ソルバーと比較して,大幅に低い計算コストで意味のある幾何学的対応関係と距離値を生成する。
- 一般化スライサーを導入することで,スライス化されたグロモフ・ワッサースタイン距離計算の効率を向上させた。
- 学習済みのスライサーを用いることで,未知の入力ペアに対しても効率的な距離計算が可能となった。
3D歩行者の生成テクスチャ多様化によるロバストな自動運転知覚 [cs.RO, cs.CV]目的:3D歩行者アセットのテクスチャ多様化による,合成データ生成の実現
- 自動運転の安全性向上には,多様な状況に対応できる高性能な知覚モデルが不可欠である。
- 実世界のデータセットでは,変化する要求に対応できず,大規模なアノテーション作業にコストがかかる。
- 生成AIを用いて歩行者テクスチャを多様化し,現実と合成データのギャップを埋めることを目指す。
- StyleGAN2を用いて歩行者の顔テクスチャを合成し,多様な個体を作成する手法を提案した。
- 2D物体検出において,実データと合成データを混合することでロバスト性が向上することを示した。
- 3D物体検出においては,点群知覚モデルが形状のドメインギャップに敏感であることを明らかにした。
RoboEvolve:限られたデータにおけるロボット操作のためのプランナー・シミュレーター共進化 [cs.RO, cs.CV]目的:ロボット操作におけるプランナーとシミュレーターの共進化フレームワーク
- ロボット操作の汎用性は,タスクに合致した物理的相互作用データの不足によって制約されている。
- 既存のビジョン言語モデルや動画生成モデルは,意味空間のずれや物理的幻覚といった課題を抱えている。
- ラベルなし画像のみを用いて,物理的に妥当な行動発見とポリシー最適化を安定化させる。
- RoboEvolveは,既存のプランナーの性能を平均30ポイント向上させ,シミュレーターの成功率を48%増加させた。
- わずか500枚のラベルなしシード画像で,完全に教師あり学習のベースラインを上回るデータ効率を実現した。
- 自律的なプログレッシブカリキュラムにより,破滅的忘却を起こすことなく,継続的な学習を実現した。
リアルタイムVLA FLASH:拡散ベースVLAのための推測推論フレームワーク [cs.HC, cs.RO, cs.CV]目的:拡散ベースの視覚言語行動モデルにおけるリアルタイムデプロイメントの実現
- 具現化された知能の発展において,視覚,言語,行動を統合するモデルの重要性が高まっている。
- 拡散ベースVLAは高性能だが,推論の遅延が大きく,リアルタイムでの応用が困難である。
- 推測推論フレームワークにより,推論回数を削減し,低遅延かつ高頻度の再計画を実現する。
- FLASHは,LIBEROにおいて,タスク性能を維持しつつ,推論時間を大幅に短縮することを示した。
- 58.0msの完全推論ラウンドを,7.8msの推測ラウンドに置き換えることで,タスクレベルの平均推論時間を3.04倍に短縮した。
- 実世界のコンベアベルト選別においても有効性が確認され,遅延が重要な具現化タスクへの応用可能性を示唆している。
BlitzGS:電光石火の速度による都市規模のガウススプラッティング [cs.CL, cs.GR, cs.CV]目的:都市規模再構成のための高速化を目指した分散3Dガウススプラッティングフレームワーク
- 大規模都市の3Dモデル構築は,自動運転や都市計画において不可欠である。
- 既存手法では,都市規模のデータに対する処理速度が課題となっていた。
- ガウスの処理負荷を削減し,都市規模の再構成を高速化することを目的とする。
- BlitzGSは,既存手法と同等のレンダリング品質を維持しつつ,処理速度を大幅に向上させた。
- ガウスのGPUへの分散,重要度に基づくサンプリング,およびビューレベルでの刈り込みにより高速化を実現。
- 大規模なベンチマークテストにおいて,都市規模のシーンを数十分でトレーニング可能となった。
VoxCor:マルチモーダルボクセル対応のためのトレーニング不要なボリューム特徴量 [cs.CV]目的:マルチモーダルボクセル対応のための再利用可能なボリューム特徴量表現
- 医療画像解析において,異なるモダリティ間での解剖学的整合性は重要である。
- 既存手法では,解剖学的方向の情報を十分に活用できていない場合がある。
- 本研究は,トレーニング不要で,モダリティに安定した解剖学的方向を選択する手法を提案する。
- VoxCorは,既存手法と比較して,難しいクロスサブジェクト,クロスモダリティ転移設定において性能を向上させた。
- エンコーダの感度を低減し,密な対応関係の転送において安定した結果が得られた。
- 手作り記述子や学習された3D特徴量と同等の登録性能を示し,ダウンストリームマルチモーダル分析における再利用可能な特徴量レイヤーとして有効であることが示された。
EvoGround: ビデオの時間的接地を行う自己進化型エージェント [cs.CV]目的:ビデオの時間的接地
- ビデオ理解の重要な課題であり,検索やインタラクションの基盤技術となる。
- 大規模なアノテーション付きデータセットが必要で,コストが高い。
- 教師なし学習で時間的接地を可能にし,アノテーションコストを削減する。
- EvoGroundは,提案者と求解者の2つの自己進化型エージェントを組み合わせたフレームワークである。
- 2500件のラベルなしビデオで学習した結果,既存の教師ありモデルと同等またはそれ以上の性能を発揮した。
- また,手動ラベルなしで最先端のファイングレインビデオキャプション生成器としても機能する。
最小最大最適化には指数関数的に多数のクエリが必要である [cs.DS, cs.CC, cs.GT, cs.LG, math.OC]目的:非凸・非凹関数fの最小最大最適化におけるクエリ複雑性
- 機械学習等の最適化問題は多岐に渡り,効率的な解法が求められている。
- 非凸・非凹関数の最適化は,局所解に陥りやすく,厳密解を見つけるのが困難である。
- ε-近似停留点を見つけるためのクエリ数を理論的に評価し,困難性を示す。
- 非凸・非凹関数の最小最大最適化において,ε-近似停留点を見つけるためには,εまたは次元dに対して指数関数的な数のクエリが必要であることが示された。
- この結果は,既存のアルゴリズムの限界を示唆しており,より効率的なアルゴリズム開発の必要性を示唆する。
- クエリ複雑性の理論的限界を理解することは,現実的な問題への適用可能性を評価する上で重要である。
JANUS:解剖学的条件付きゲーティングによる,分布シフト下での堅牢なCTトリアージ [cs.CV]目的:CTトリアージにおける堅牢性と正確性の向上
- CT画像は病状診断に不可欠だが,専門医の負担が大きい
- 機関間の画像取得プロトコルの違いがモデルの汎化性能を阻害する
- 解剖学的情報を活用し,分布シフトに強いトリアージモデルを開発する
- JANUSはMERLINテストセットで,macro-AUROC 0.88,AUPRC 0.74を達成し,既存手法を上回った
- 外部データセットでもAUROC 0.87を維持し,特にサイズや減衰で定義される病状で改善が見られた
- ドメインシフト下で,JANUSは偽陽性を大幅に抑制し,信頼性を高めた
OmniLiDAR:マルチドメイン3D LiDAR生成のための統一拡散フレームワーク [cs.CE, cs.CV, cs.RO]目的:マルチドメインにおける3D LiDARデータの生成
- LiDARデータの活用が,大規模なシミュレーションや合成データ生成において不可欠となっている。
- 既存手法では,ドメインごとにモデルが必要となり,多様な条件下での統一的な制御が困難である。
- 異なるドメイン間で一貫性のあるLiDARデータ生成を可能にし,異質な分布変化に対応する。
- OmniLiDARは,8つの代表的なドメインにわたるLiDARスキャンを生成する,テキスト条件付きの統一拡散フレームワークである。
- Cross-Domain Training Strategy(CDTS)とCross-Domain Feature Modeling(CDFM)により,ドメイン間の学習を効率化している。
- 生成されたデータは,セマンティックセグメンテーションや3D物体検出などの下流タスクにおいて,データ拡張による性能向上を示した。
履歴アンカー:過去の行動がLLMの意思決定を危険な方向へ導く仕組み [cs.RO, cs.SY, eess.SY, cs.AI, cs.CV]目的:LLMにおける過去の行動履歴が,その後の意思決定に与える影響の分析
- LLMはエージェントとして活用されつつあり,安全性確保が重要な課題となっている。
- LLMは過去の履歴に影響を受けやすく,危険な行動を継続する可能性がある。
- LLMの行動履歴に対する脆弱性を明らかにし,安全な運用方法を模索する。
- 先行する有害な行動履歴が存在する場合,最先端のLLMは,システムプロンプトのみでは危険な選択肢を選ばない。
- しかし,「過去の戦略と一貫性を保て」という指示を加えることで,LLMは91~98%の確率で危険な選択肢を選択するようになる。
- さらに,危険な選択肢がエスカレートする傾向も見られ,LLMの安全性に対する重大な懸念が示唆される。
長文脈Vision-Languageモデルの効率的な学習:128Kコンテキストを超える汎化 [cs.CV]目的:長文脈Vision-Languageモデルの効率的な学習手法の開発
- 近年の大規模Vision-Languageモデルにおいて,長文脈の理解能力は不可欠な機能となっている。
- 長文脈データにおける学習レシピは十分に確立されておらず,データ混合の設計とバランスが課題である。
- 長文脈におけるモデルの汎化能力向上を目指し,効果的な事前学習手法を確立する。
- 長文脈VQAがOCR転写よりも効果的であることが示された。長文脈データの活用が重要である。
- シーケンス長分布において,特定の長さに偏ったデータよりもバランスの取れたデータが有効であることが明らかになった。
- MMProLongは,128Kの学習範囲を超えて256K,512Kコンテキストにおいても高い性能を維持し,汎化能力を示す。
QLAM:量子長距離注意メモリによる長系列トークンモデリング [cs.LG, cs.CV]目的:長系列データのトークンモデリング手法
- 系列データ処理は機械学習の重要な課題であり,長距離依存性のモデル化が不可欠である。
- Transformerは計算量の問題から長系列への適用が難しく,SSMは表現力に限界がある。
- 量子重ね合わせの特性を利用し,SSMのメモリ表現を豊かにすることで,この課題を解決する。
- QLAMは,量子状態を用いて過去情報を重ね合わせで表現し,量子回路によって状態を更新する。
- 従来の注意機構とは異なり,QLAMは量子状態の進化を通じて暗黙的にグローバルな依存関係を捉える。
- sMNIST,sFashion-MNIST,sCIFAR-10の評価実験で,QLAMは既存手法を上回る性能を示した。
CLIPベースのクラスインクリメンタル学習におけるパッチレベルの特徴の活用 [cs.CV]目的:CLIPベースのクラスインクリメンタル学習における性能向上
- 継続的な学習能力は,AIシステムの適応性と実用性を高める上で不可欠である。
- 既存手法は,CLIPの持つ豊富なパッチレベルの情報を十分に活用できていない。
- パッチレベルの特徴を効果的に活用することで,知識の忘却を抑制し,学習性能を向上させる。
- 提案手法SPAは,クラスごとのセマンティック記述を生成し,それに基づいて識別的なパッチレベルの特徴を選択する。
- 選択されたパッチとセマンティック記述を最適輸送を用いて整列させ,構造化されたクロスモーダルなアライメントを実現する。
- タスク固有の射影器と疑似特徴のサンプリングにより,新しいタスクへの適応と過去の知識の保持を両立する。
R-DMesh:ビデオ誘導による3Dアニメーション - 修正された動的メッシュフロー [eess.SY, cs.SY, cs.CV, cs.GR, cs.LG]目的:ビデオ誘導3Dアニメーションにおけるポーズのずれを解決し,高品質な4Dメッシュ生成
- コンテンツ作成において,直感的かつ高精度な動的アセット制御の需要が高まっている
- ユーザ提供の静的メッシュ初期ポーズと参照ビデオ開始フレームのずれが,深刻な問題となっている
- 初期ポーズのずれを自動修正し,高品質な3Dアニメーションを実現することを目指す
- R-DMeshは,入力メッシュをビデオの初期状態に自動的に変換する「rectification jump offset」を導入
- Triflow Attentionメカニズムにより,幾何学的特徴を活用し,物理的整合性と局所的な剛性を確保
- 大規模データセットVideo-RDMeshを構築し,ポーズずれのシミュレーションと高品質な4D生成を可能にした
EVA-Bench:音声エージェント評価のための新しいエンドツーエンドフレームワーク [cs.CL, cs.SD, cs.AI, cs.CL, cs.LG]目的:音声エージェントの評価
- 企業における音声エージェントの利用が拡大しており,その性能評価が重要になっている。
- 既存の評価手法では,現実的な会話の生成と,音声特有の失敗モードの網羅的な測定が課題であった。
- 現実的な会話を生成し,音声エージェントの様々な性能を包括的に評価できるフレームワークを開発する。
- EVA-Benchは,ボット同士の音声会話をシミュレーションし,自動的に会話の品質を検証する。
- タスク遂行率,忠実性,音声品質を評価するEVA-Aと,会話の円滑さ,簡潔さ,応答速度を評価するEVA-Xという2つの指標を導入した。
- 12のシステムを評価した結果,EVA-AとEVA-Xの両方で高い性能を示すシステムは存在せず,また,最高性能と安定性能には差が見られた。
事前セマンティック輪郭上の距離変換を用いた単眼深度推定の改善 [eess.IV, cs.CV]目的:単眼深度推定の精度向上
- 自動運転やロボット工学において,周囲環境の3次元情報を正確に把握することが不可欠である。
- 自己教師あり学習による単眼深度推定は,テクスチャの少ない領域で曖昧な深度予測になりやすいという課題がある。
- 事前セマンティック輪郭と距離変換を活用することで,テクスチャの少ない領域における深度推定の精度を向上させる。
- 事前セマンティック輪郭上に距離変換を適用することで,テクスチャの少ない領域における空間情報の識別能力を高めた。
- 距離変換が最適な分散増強手法であることを理論的に証明し,深度と自己運動推定の学習プロセスを強化した。
- KITTI, Cityscapes, Waymo, NYUv2, ScanNetにおける実験により,自己教師あり学習による単眼深度推定において,提案手法が競合手法を上回る性能を示すことを実証した。
MRI画像における脳腫瘍の分類:計算効率の高い畳み込みニューラルネットワーク [eess.IV, cs.CV, cs.LG]目的:脳腫瘍の多クラス分類
- 脳腫瘍の早期正確な診断は患者の予後改善に不可欠であるため,画像診断技術の発展が重要である。
- 従来のMRI画像解析は時間がかかり,信頼性に課題がある。深層学習モデルは計算負荷が高く,脳腫瘍の多様性に十分に対応できていない。
- 計算負荷を抑えつつ,高い分類精度を実現する脳腫瘍診断支援モデルを開発し,臨床現場での実用化を目指す。
- 提案する畳み込みニューラルネットワークは,2つの公開データセットにおいてそれぞれ99.03%と99.28%の分類精度を達成した。
- 既存の高性能モデルと比較して,パラメータ数を大幅に削減し,計算コストを低減しながら,より優れた性能を示した。
- 本研究は,臨床現場における実用的かつ信頼性の高い診断支援ツールの開発可能性を示唆する。
肺CTにおける交差ウィンドウ知識蒸留による潜在的な病理学的特徴の解明 [eess.IV, cs.AI, cs.CV]目的:多ウィンドウCT画像からの病理学的特徴抽出における知識蒸留フレームワーク
- 肺CTは様々な密度を持つ解剖学的構造を捉え,病態把握に不可欠である。
- 既存手法では,異なる密度領域間の相互作用が十分に活用されていない。
- 知識蒸留により,より効果的な病理学的特徴抽出を目指す。
- 知識蒸留により,COPD-CT-DFデータセットにおいて,各ウィンドウのAUCが10.1-16.5%向上した。
- 同様の改善がRSNA PEおよびCTEPDデータセットでも確認された。
- 交差ウィンドウ知識蒸留は,教師ありアプローチでは捉えられない病理学的特徴を学習し,汎用性の高い解析手法を提供する。
コンパクトな根拠は無料か?フローズンWSI-MILにおけるタイル選択の余地を測定 [eess.IV, cs.AI, cs.CV]目的:フローズンWSI-MILモデルのスライドレベル予測を,再学習なしにコンパクトなタイルサブセットから再現できるかの検証
- 全スライド画像(WSI)のマルチインスタンス学習(MIL)は診断支援において重要だが,予測根拠の説明性が課題である。
- アテンションスコアは説明として利用されるが,モデルの十分な根拠を反映しているとは限らない。
- モデルの出力に十分なタイルサブセットを特定し,コンパクトで検証可能な根拠の提示を目指す。
- FOCIは,TransformerやMulti-branch Attentionといった集約器ではコンパクトな根拠を許容する一方,Near-minimal Attention-poolingでは選択飽和状態に陥ることを示した。
- TransMILにおいて,FOCIは最小限の十分なタイル数を32-56%削減し,ACMIL+FOCIは最高の平均SHI(+0.465)を達成した。
- FOCIはモデルの解釈性と監査のレイヤーとして機能し,選択されたタイルは診断の十分性ではなく,予測の局所化に役立つ候補根拠を提供する。
人間の顔知覚は逆生成モデルと自然主義的識別目標を反映する [quant-ph, cs.CC, q-bio.NC, cs.CV]目的:人間の顔知覚を支える知覚表現の解明
- 顔認識は社会生活において不可欠であり,その認知メカニズムの理解は重要である。
- 深層学習モデルは顔知覚のメカニズムを説明するが,異なるモデル間の予測が区別困難である。
- 人間の顔知覚を特徴づけるメカニズムの特定と,その形成における自然画像統計の役割の解明。
- 高レベルで不変な構造を重視するモデル(逆レンダリング,顔識別,物体分類で訓練されたもの)が,人間の判断と最も一致した。
- 自然画像で訓練されたモデルは,合成画像で訓練されたモデルよりも良好な性能を示した。
- 人間の顔知覚は,潜在的な原因を推論し,不要な変動を無視し,自然画像統計によって調整されるメカニズムによって形成されると考えられる。
疎な2Dから高密度3Dへの弱学習最適化:大規模生体外MRIデータのマルチラベルセグメンテーションへの応用 [math.CT, cs.ET, eess.IV, cs.CV, cs.LG]目的:高解像度生体外MRIにおけるマルチラベルセグメンテーションのための弱学習フレームワークの最適化
- 高解像度MRIデータの体積アノテーションは高コストであり,効率的なセグメンテーション手法が求められている。
- 疎な2Dスライスからの高密度3Dセグメンテーションにおいて,視覚的改善と最適化戦略の転移に関する指針が不足している。
- 2D教師モデルと3D生徒モデルの学習ダイナミクスの違いを明らかにし,最適な正則化手法を特定すること。
- 2D教師モデルは,データ不足を克服するために空間的な拡張とソフトラベリングが重要であり,White Matter LesionのDiceスコアが11ポイント以上向上した。
- 一方,これらのテクニックを3D生徒モデルに適用すると,パフォーマンスが低下することが示された。
- また,人間中心の前処理(CLAHEなど)は,グローバルな統計的情報を阻害し,Gray Matter LesionのDiceスコアを約25ポイント低下させた。
網膜血管を媒介とした疾患解析のための汎用ベジェツリー符号化反事実的フレームワーク [eess.IV, cs.CV, cs.LG]目的:網膜血管の幾何学的特徴に基づく血管疾患のバイオマーカーとしての利用
- 網膜血管の形状は血管疾患の重要な指標である。疾患メカニズム解明と早期診断に不可欠。
- 既存手法は画像レベルでの介入に留まり,血管構造の具体的な変化と疾患の関係を特定できていない。
- 本研究は,血管構造を操作し,疾患予測への影響を分析することで,因果関係の検証を目指す。
- ベジェツリー符号化反事実的フレームワーク(BTECF)を提案。血管網をベジェ曲線で表現し,構造的特徴を操作可能にした。
- BTECFを用いた介入実験の結果,血管の曲がり具合や太さの変化が,疾患分類器の予測に用量依存的に影響を与えた。
- 偽陽性抑制実験により,BTECFが血管構造と疾患予測の因果関係を明確に示していることを検証した。
逆問題における幻覚:基本的な限界と検証可能な評価手法 [stat.ML, cs.CV, cs.LG]目的:逆問題における幻覚の限界と評価方法
- 画像処理技術は医療診断や地球観測など,多岐にわたる分野で重要性を増している。
- 深層学習モデルは,真の値がない場合,現実離れした誤った情報を生成しやすいという課題がある。
- 逆問題の本質的な限界を明らかにし,幻覚の程度を評価する手法を開発すること。
- 理論的な枠組みにより,幻覚はモデル固有の問題ではなく,逆問題の性質に起因することが示された。
- 前方モデルのみを用いて,幻覚の最小限の大きさの上界を計算可能であることが明らかになった。
- 提案手法は,様々な画像処理タスクで有効であり,AIによる幻覚を定量化・評価する方法を提供する。
拡張シナリオバンドル分析:戦略的シナリオモデリングのための形式的フレームワーク [econ.TH, cs.GT]目的:戦略的シナリオモデリングのための形式的フレームワーク
- 不確実性の高い状況下での意思決定において,専門家の判断と相互依存関係の考慮が重要である。
- 既存の分析手法では,定量的データが不足する場合や,更新規則の透明性が低いという課題があった。
- 定量的データに頼らず,更新可能なフレームワークを提供し,戦略的危機分析を支援すること。
- 本研究では,シナリオデータベースと動的なシナリオツリーシステムを分離した二層構造を導入し,SBAフレームワークを形式的に拡張した。
- 信念,欲求,意図,恐れといった豊富な態度語彙を取り入れ,文脈に応じたシナリオ分析を可能にした。
- 数学的定義を明確化することで,計算機による実装を支援し,分析の効率化と透明性の向上に貢献する。
ディープフィルター:学習型デジタルフィルター再構成による散乱を考慮した瞳孔エンジニアリングによる拡張深度顕微鏡法 [physics.optics, cs.CV]目的:拡張深度顕微鏡法における焦点深度拡大の実現
- 生体組織観察において,焦点深度の拡大は重要である。広範囲の組織を鮮明に観察することが可能となるからである。
- 従来の拡張深度顕微鏡法は,散乱組織において画質が劣化しやすいという課題があった。
- 散乱の影響を軽減し,より深部の組織からの信号取得を可能にすることを目的とする。
- ディープフィルターは,パラメータ化された瞳孔フィルターとデジタルフィルターベースの再構成ネットワークを同時に最適化する。
- 実験の結果,透明な媒体ではPSFを16ミクロンから400ミクロン以上に,生物組織内では120ミクロン以上の深さからの信号回復が可能となった。
- 固定脳スライスやウニの胚を用いた検証により,その有効性が確認された。
社会的ジレンマにおける高コストシグナリングと協力の共進化 [physics.soc-ph, cs.GT, q-bio.PE]目的:高コストシグナリングと協力の共進化メカニズム
- 協力行動は進化的に説明が難しく,生物・社会システムで広く見られる現象である。
- 高コストのシグナリング行動と協力行動が,どのように維持されるか不明確である。
- 高コストシグナリングが協力的な反応を促し,戦略環境を変化させるメカニズムを解明する。
- シグナルは,その生成コストよりも,現在の協力的な反応によって選択されることが示された。
- 均一混合集団では,囚人のジレンマやスノーdriftゲームで部分的な協力が,スタグハントゲームではほぼ完全な協力が維持された。
- 格子状集団では,局所的な類似性によって協力がさらに強化された。
側情報を用いた多基準多次元メカニズム設計 [cs.GT, econ.TH]目的:高福祉と高収益を両立するための多次元メカニズム設計
- メカニズム設計は,資源配分の効率性とインセンティブ適合性を両立させる上で重要である。
- 従来のメカニズム設計では,エージェントの側情報(専門家の助言等)の活用が十分でなかった。
- エージェントの側情報を組み込むことで,より高福祉かつ高収益なメカニズムを設計することを目指す。
- 提案メカニズムは,質の高い側情報を利用することで,総社会余剰と同等の福祉と収益を達成できる。
- 側情報の品質が低下した場合でも,性能が緩やかに低下する。
- 弱タイプに基づくVCG類似メカニズムを改良し,様々な側情報形式に対応できるメカニズムを設計した。
物理ロボット相互作用のためのマルチモーダルワールドモデル:高精度な同時視覚・触覚予測 [cs.CG, cs.RO, cs.AI, cs.CV]目的:物理ロボット相互作用における視覚と触覚の同時予測によるワールドモデルの構築
- ロボットが複雑な環境で動作するためには,物理世界を理解し予測する能力が不可欠である。
- 既存の研究では視覚情報に偏っており,触覚情報の重要性が十分に考慮されていない。
- 触覚と視覚情報を統合することで,物理的な曖昧性下での予測精度向上を目指す。
- 視覚と触覚情報を統合した予測は,物理的に曖昧な状況下で最も効果を発揮することが示された。
- 視覚的に物体の挙動が推測可能な状況では,改善は限定的であった。
- 磁気ベースの触覚センサーを用いた,教師なし学習のためのロボットプッシュデータセットを新たに2つ公開した。
高密度な視覚SLAMのためのコンパクト3Dガウススプラッティング [cs.CV, cs.RO]目的:3Dガウススプラッティングを用いたSLAMシステムの効率化
- SLAMは,ロボットや自動運転など様々な分野で,環境を認識し自己位置を推定するために不可欠である。
- 従来の3DガウスベースのSLAMは,多数の冗長なガウス楕円体を使用するため,メモリ消費量や計算コストが大きい。
- ガウス楕円体の数とパラメータサイズを削減し,高速かつ効率的なSLAMシステムの実現を目指す。
- 提案手法では,スライディングウィンドウに基づくマスキング戦略により,冗長なガウス楕円体を削減した。
- ガウス楕円体の共分散行列の類似性を利用し,新しいジオメトリコードブックを用いて幾何学的属性を圧縮した。
- グローバルバンドル調整により,ロバストで正確な姿勢推定を実現し,最先端の性能を維持した。
画像拡散モデルの転用によるMelスペクトログラムを用いた学習不要の音楽スタイル変換 [cs.SD, cs.AI, cs.LG, eess.AS]目的:音楽スタイル変換のフレームワーク
- 音楽制作において,個人の好みに合わせた音楽生成が重要視されている。
- 既存手法では,微細な音響ニュアンスの再現が難しく,テキスト説明に頼るか,高コストな学習が必要となる。
- 事前学習済みの画像拡散モデルを転用し,学習不要で高品質な音楽スタイル変換を実現すること。
- 提案手法Stylusは,Melスペクトログラムを画像として扱い,自己注意機構を操作することでスタイル変換を行う。
- 位相情報を保持する再構成戦略により,スペクトログラム反転時のアーティファクトを軽減し,高忠実度を実現した。
- 2,925件の人間評価において,Stylusは最先端手法を凌駕し,コンテンツ保持率34.1%向上,知覚的品質25.7%向上を達成した。
視覚的調節:物体検出のための学習可能な変数としての画像スケール再考 [cs.CV, cs.AI]目的:物体検出における画像スケールの学習可能性
- 物体検出は,画像内の物体を特定する重要な技術であり,様々な応用分野で活用されている。
- 既存の物体検出器は,固定された解像度で推論を行うため,スケール変化への対応が課題であった。
- テスト時の解像度を動的に調整することで,スケール変化に対するロバスト性を向上させることを目指す。
- 本研究では,生物の調節機構に着想を得たCiliary-DETRを提案し,テスト時の解像度を自動調整するフレームワークを構築した。
- 軽量なスケール予測器を導入し,入力スケールに応じて最適なスケールファクタを動的に推定することで,柔軟かつ効率的な推論を実現した。
- 損失関数に基づいたスケール最適化により,訓練時のロバスト性とテスト時の適応能力のギャップを埋めることに成功した。
AIvaluateXR:XRデバイスにおけるオンデバイスAIの評価フレームワークとベンチマーク結果 [eess.SY, cs.SY, cs.DC, cs.AI, cs.GR, cs.HC]目的:XRデバイスにおけるオンデバイスAIのモデルとデバイスの選択に関する評価基準
- XR技術とAIの融合は,人間とAIの新たなインタラクションの可能性を広げる重要な分野である。
- XRデバイス上でLLMを直接実行する場合,タスクに適したモデルとデバイスの選択が困難である。
- 様々なモデルとデバイスの性能を比較評価し,最適な組み合わせを見つける方法を確立すること。
- AIvaluateXRフレームワークを用いて,17種類のLLMを4つのXRプラットフォーム上でベンチマークした。
- 性能の一貫性,処理速度,メモリ使用量,バッテリー消費量の4つの主要指標を測定し,モデルとデバイスの組み合わせ68パターンを評価した。
- 3Dパレート最適性に基づいた評価方法により,品質と速度のバランスが取れた最適な組み合わせを提案した。
DeePen:音声ディープフェイク検出に対する侵入テスト [cs.CR, cs.AI, cs.SD, eess.AS]目的:音声ディープフェイク検出システムの脆弱性評価
- ディープフェイクは,個人や組織に対するセキュリティリスクが高まっているため,対策が急務である。
- 既存のディープフェイク検出システムは,攻撃に対して頑健でない可能性があり,容易に欺瞞される恐れがある。
- 本研究は,ディープフェイク検出システムの脆弱性を明らかにし,対策の方向性を示すことを目指す。
- DeePenは,ターゲットモデルの事前知識なしに,信号処理による操作(攻撃)を用いて脆弱性を評価する侵入テスト手法である。
- 実世界のシステムと公開されているモデルを分析した結果,すべてのシステムが脆弱性を示し,単純な操作で欺瞞可能であることが示された。
- 特定の攻撃に対する再学習で緩和できる攻撃もあるが,効果が持続する攻撃も存在する。
解析を意識したビジョン言語モデル:動的コントラスト学習によるゼロショットのディープフェイク帰属 [cs.CV]目的:ディープフェイク画像の生成元特定
- 生成モデルの急速な発展に伴い,偽造された顔画像の出所追跡の重要性が高まっている。
- 既存研究は主に視覚的特徴に焦点を当てており,テキストや顔解析といった他のモダリティの活用が不十分である。
- 拡散モデル等の未知の生成モデルに対するディープフェイク帰属の汎化性能を詳細に評価し,高精度な追跡を可能にすること。
- 提案手法は,ゼロショットディープフェイク帰属(ZSDFA)ベンチマークにおいて,最先端技術を上回る性能を示した。
- 顔解析に基づく特徴抽出により,GANや拡散モデルによって生成された画像におけるソース顔属性の保持度合いの違いを捉える。
- 動的ビジョン-解析マッチングとコントラスト損失を用いることで,関連する生成モデルを近づけ,関係のないモデルを遠ざける。
GeomHair:無彩色3Dスキャンからの髪の毛ストランド再構成 [cs.DB, cs.CY, cs.CL, cs.CY, cs.HC, cs.DC, cs.ET, cs.CV]目的:髪の毛ストランドの再構成
- リアルなデジタルアバターやAR/VR等の実現には,髪の毛の正確な表現が不可欠である。
- 既存手法では,髪の毛の複雑な構造からストランドを正確に復元することが困難であった。
- 無彩色3Dデータのみから高精度な髪の毛ストランドの再構成を可能にすることを目指す。
- 提案手法は,スキャンのシャドウレンダリングにニューラル2Dライン検出器を適用し,髪の毛の向きを推定することで,ストランドを直接識別する。
- 多様な合成髪の毛スキャンで学習した拡散事前知識を活用し,スキャン固有のテキストプロンプトで適応させることで,再構成精度を高めている。
- 本研究により,400人のスキャンデータから抽出した詳細な表面幾何形状を持つ髪の毛ストランドの公開データセットStrands400を構築した。
レンズ:大規模言語モデルによるマルチモーダル推論の多段階評価 [cs.CV]目的:マルチモーダル推論の多段階評価のためのベンチマーク
- 画像と言語情報を統合するMLLMは進歩しているが,複雑な現実世界の推論能力には限界がある。
- 既存のベンチマークはタスク指向で,異なるタスクサンプルが同じデータ分布に従う保証がない。
- 知覚能力と高次推論の相乗効果を評価できる,多段階ベンチマークを開発する。
- 本研究では,3.4K枚の画像と6万件以上の質問を含む「Lens」を提案した。知覚,理解,推論の3段階で評価可能。
- 各画像には豊富な注釈が付与されており,基本的な知覚から複雑な推論まで,画像不変のプロンプトに対応できるMLLMの評価が可能。
- Qwen2.5-VL-72B,GPT-4oなどの最先端MLLM15機種以上を評価した結果,推論タスクにおいて60%以上の精度を達成するモデルはなかった。
3D-UIR:物理ベースのAppearance-Mediumデカップリングによる水中3Dシーン再構築のための3Dガウス [cs.CV]目的:水中3Dシーン再構築のための新規視点合成手法
- 水中環境は光と媒体の複雑な相互作用により,従来の研究手法の適用が困難である。
- 水中での光の散乱と吸収は,均一な媒体伝搬の仮定を乱し,ボリュームレンダリングに干渉する。
- 3Dガウススプラッティングの水中環境におけるアーティファクトと不整合な外観を改善する。
- 提案手法は,オブジェクトの外観と水中の媒体効果を物理ベースで分離するフレームワークである。
- バック散乱と減衰に対する明示的な媒体表現であるAppearance Embeddingを導入し,シーンの一貫性を高める。
- 深度ガイド最適化戦略を用いることで,幾何学的忠実度を向上させる。
ニューラル特徴による非剛体形状登録 [cs.CV, cs.AI]目的:3D形状登録のための学習に基づくフレームワーク
- 形状解析は,医療画像処理やコンピュータビジョンなど幅広い分野で重要である。
- 非剛体変形や形状の一部分の欠損がある場合,従来の形状登録は困難である。
- 深層学習に基づく形状マッチングネットワークから得られる特徴を利用し,よりロバストな形状登録を実現する。
- 本研究では,わずかな学習データで既存のベンチマークにおいて最先端の結果を達成した。
- 提案手法は,外挿的・内挿的な大きな変形を持つ未知の形状ペアに対しても高品質な対応付けを提供する。
- ニューラル特徴は,空間的特徴よりも正確で意味のある対応関係推定を可能にする。
見るものを再検討:LVLMのデコーディングを導く視覚トークンの視覚的意味の解明 [cs.CV, cs.AI, cs.CL]目的:大規模ビジョン言語モデルにおける視覚情報のデコーディングへの貢献度に関する理解
- マルチモーダルタスクにおいて,視覚情報と言語理解の統合が重要であり,モデルの性能向上に不可欠である。
- 既存のLVLMは幻覚(ハルシネーション)を起こしやすく,視覚情報がデコーディングにどのように影響しているか不明である。
- 視覚トークンが持つ意味情報を活用し,LVLMのデコーディングを改善することで,幻覚を抑制すること。
- 視覚トークンは,幻覚が発生している場合でも意味のある視覚情報を含んでおり,テキスト空間に意味が符号化されていることが明らかになった。
- ReVisiTは,視覚トークンを参照することでLVLMのテキスト生成を導く,学習不要のシンプルなデコーディング手法である。
- ReVisiTは,既存の最先端のデコーディング手法と同等またはそれ以上の性能を達成しつつ,計算コストを最大で2倍削減する。
生成動画の模倣によるロボットマニピュレーション:物理的なデモンストレーションなし [cs.RO, cs.AI, cs.CV]目的:生成された動画の模倣を通じたロボットマニピュレーションの実現
- ロボットの自律的なタスク実行能力向上は,人手不足解消や危険作業の代替に不可欠である。
- ロボットに複雑なマニピュレーションを教えるには,大量の物理的なデモンストレーションが必要となる。
- 物理的なデモンストレーションに頼らず,AI生成動画によってロボットにタスクを学習させる。
- AI生成動画による模倣が,実際のデモンストレーションと同程度の効果を発揮することが示された。
- 生成動画の品質向上は,ロボットのパフォーマンス向上に繋がることが確認された。
- 最先端の動画生成モデルが,ロボットマニピュレーションのための効果的な教師データとなり得る。
推論に基づく画像編集:視覚的推論を用いた仮説的指示による画像編集 [cs.CV]目的:仮説的指示を用いた画像編集能力の向上
- 画像編集技術は,多様な応用分野で重要性を増しており,より高度な編集能力が求められている。
- 既存の画像編集技術は,単純な指示にしか対応できず,複雑な推論を必要とする指示には脆弱である。
- 本研究は,より複雑な指示に対応できる画像編集技術を開発し,その評価データセットを提供する。
- Reason50Kという大規模データセットを構築し,仮説的指示を用いた画像編集の学習と評価を可能にした。
- ReasonBrainという新しいフレームワークを提案し,多様なシナリオにおける指示の推論と実行を実現した。
- 提案手法は,既存手法と比較して,推論能力を必要とするシナリオで高い性能を示し,汎化性能も優れていた。
スキルベースの視覚・言語ナビゲーションエージェントの分解と構築 [cs.AI, cs.CL, cs.CV]目的:視覚・言語ナビゲーションにおけるスキルベースの推論フレームワーク
- 自然言語による指示と3D環境のナビゲーションは,ロボット工学や仮想現実において重要な課題である。
- 既存手法は未知の状況への汎化性能が不十分であり,複雑な空間・時間的推論が困難である。
- 解釈可能なスキル分解と,動的なスキル選択による汎化性能の向上を目指す。
- 提案手法SkillNavは,ナビゲーションを複数の原子的なスキルに分解し,それぞれのスキルに対応する専門のエージェントを用いる。
- SkillNavは,GSA-R2Rベンチマークにおいて,従来よりも優れた汎化性能を達成した。
- VLMベースのルーターを用いて,視覚情報と過去の行動に基づいて最適なエージェントを動的に選択する。
SkySplat:多時期の疎な衛星画像からの汎化可能な3Dガウススプラッティング [cs.CV]目的:多時期の疎な衛星画像からの3Dシーン再構成手法
- 衛星画像からの3D再構成は,地形把握や都市モデリングなど,様々な分野で重要である。
- 従来の衛星画像を用いた3D再構成は,視点数の少なさや,衛星固有のRPCモデルとの互換性の問題があった。
- 本研究では,RPCモデルを組み込み,一時的な物体や放射の影響を軽減することで,高精度な再構成を目指す。
- SkySplatは,既存手法と比較して,86倍の高速化と高い精度を実現した。
- DFC19データセットにおいて,平均絶対誤差を13.18mから1.80mに大幅に低減した。
- MVS3Dベンチマークにおいて,データセット間の汎化性能が高いことが示された。
車内におけるVision Foundationモデルを用いたスケーラブルな物体検出 [cs.CV]目的:車内における物体検出と位置特定のためのフレームワーク
- 車内AIは,パーソナルアシスタントの応答品質向上に不可欠であり,その重要性は増している。
- 車載システムの計算資源は限られており,高性能なAIモデルの直接的な搭載が困難である。
- この研究は,計算資源の制約下でも高性能な物体検出を実現することを目指す。
- 提案するODALフレームワークは,オンボードとクラウドの分散アーキテクチャにより,Vision Foundationモデルの利用を可能にする。
- ファインチューニングされたODAL-LLaVAモデルは,ODALスコア89%を達成し,ベースライン性能から71%の改善,GPT-4oを20%上回る性能を示した。
- さらに,ファインチューニングされたモデルは高い検出精度を維持しつつ,幻覚を大幅に低減し,GPT-4oよりも3倍高いODAL SNRを実現した。
高エネルギー物理におけるニュートリノイベント分類のための視覚言語モデルの適応 [cs.LG, cs.AI, cs.CV, hep-ex]目的:高エネルギー物理実験におけるピクセル化された検出器データからのニュートリノ相互作用の識別
- 素粒子物理学は,宇宙の基本的な構成要素と相互作用を解明する重要な研究分野である。
- ニュートリノイベントの分類は,実験データの解釈において精度と効率が課題となっていた。
- 従来のCNNやViTと比較して,視覚言語モデルの性能向上と解釈可能性の向上を目指す。
- Transformerベースのアーキテクチャは,従来のCNNよりも分類精度とロバスト性において優れた性能を示した。
- 視覚言語モデルは,補助的なテキスト情報や意味情報の統合により,より柔軟な予測を可能にした。
- この研究は,実験ニュートリノ物理におけるマルチモーダル推論のための新しい道を開く可能性を示唆している。
