研究テーマ

カメラ画像と言語指示を入力として、ロボットの行動を生成するVLAモデルの概要。

フィジカルAIの安全性

信頼できるVLAモデルと身体性を持つAIエージェント

JSPS KAKENHI · 26K25580

変化する環境の中で、身体性を持つAIが安全に知覚・推論・行動するための研究に取り組んでいます。環境変化や敵対的入力への頑健性と、信頼できるVision-Language-Actionモデルの安全性評価基盤を研究します。

  • 実環境での分布変化に対する頑健性
  • 敵対的攻撃に対する頑健性
  • 信頼できるVLAの安全性評価

Awesome Physical AI Safety
VLA・ロボット・自律システム・身体性AIの安全性、セキュリティ、頑健性、信頼できる運用をまとめたLLM支援型文献集。

敵対的学習における非対称な表現正則化手法の概要。

敵対的攻撃への頑健性と汎化性能

失敗のメカニズムを理解し、頑健な表現を学習する

敵対的な摂動や知覚の曖昧さによってモデルが失敗する理由を分析し、学習と予測の信頼性を高める手法を開発しています。失敗のメカニズムと、頑健な学習・防御・校正・汎化の関係を、さまざまなタスクやモダリティで探ります。

  • 失敗メカニズムの理解・分析
  • 頑健な学習
  • 予測信頼度の校正と汎化
一対多の画像・テキスト関係を利用したマルチモーダル敵対的学習の概要。

視覚言語モデルの信頼性

頑健なマルチモーダル理解と評価

視覚情報と言語情報を信頼性高く理解するための、視覚言語モデルの学習手法とベンチマークを開発しています。マルチモーダルな敵対的防御、言語教師信号、画像と言語の対応付けに加え、画像中の文字を読むべきか無視すべきかを評価します。

  • 頑健なマルチモーダル学習と敵対的防御
  • 言語教師信号と画像・言語の対応付け
  • 安全性評価・Typographic 攻撃への頑健性・文字認識
グレースケール画像に摂動を加え、無断AI色付けを不自然にするSemantic Color Naturalness Breakerの概要。

モデルの所有権検証とコンテンツ保護

モデルと視覚コンテンツを無断利用から保護する

モデルの所有権を検証し、視覚コンテンツを無断のAI処理から守る手法を開発しています。Model Mergeに耐えるフィンガープリント、画像編集を追跡する透かし、無断の色付けを防ぐコンテンツに応じた摂動を研究します。

  • Model Merge後の所有権検証
  • 画像編集を追跡する透かし
  • 知覚とコンテンツを考慮したAI色付け防止

研究助成

科研費・研究活動スタート支援

JSPS KAKENHI — Research Activity Start-up

信頼できるVLAの実現に向けた安全評価基盤の構築

Building a Safety Evaluation Framework for Trustworthy Vision-Language-Action Models

課題番号
26K25580
期間
2026年7月31日〜2028年3月31日
役割
研究代表者
配分額(総額)
260万円直接経費:200万円・間接経費:60万円
KAKENで課題を見る ↗

研究助成(終了)

日本学術振興会 特別研究員(DC2)

JSPS Research Fellowships for Young Scientists

期間
2024年4月〜2026年3月
役割
特別研究員(DC2)
JSPSの制度を見る ↗

JST AIPチャレンジプログラム

JST AIP Challenge Program

期間
2023年4月〜2024年3月
研究費
100万円
JSTの制度を見る ↗