Concept2Brainとは|画像・テキストから脳波を擬似生成するAIの仕組みと性能

PsyPost アメリカ
概要
研究チームが、画像やテキストから人間の脳波(EEG)を予測・シミュレートするAIツール「Concept2Brain」を開発した。このオープンアクセスプラットフォームは、視覚的・感情的な知覚に伴う実際の脳活動に類似した合成EEG記録を生成できる。これにより、研究者は人間の被験者を募集する前に、コンピュータ上で脳波実験のシミュレーションを行うことが可能になる。
詳細

主要成果

研究チームは、写真や記述されたテキストに対して人間の脳波がどのように反応するかを予測するAIツール「Concept2Brain」を開発し、その成果をNature Communications誌で発表した。このシステムは、視覚的および感情的な知覚プロセスにおける実際の脳活動に類似した合成脳波(EEG)データを生成できる。これにより、コストと時間がかかる実データの収集に頼らずに、脳波信号のシミュレーションが可能となる。

技術・詳細

Concept2Brainは、2つのディープニューラルネットワークを連携させることで、現実世界の概念を脳波に変換している。

  • 条件付き変分オートエンコーダー(CVAE): 129チャンネルのEEG記録を256個の数値からなるコンパクトな要約に圧縮する。また、参加者識別子をタグ付けすることで、個々の脳波形状の個人差を保持しており、デコーダー側で特定の仮想参加者のEEGパターンを再現できる。
  • 翻訳ネットワーク: OpenAIのCLIPシステムをベースにしており、画像とテキストを共通の512次元の概念空間にマッピングする。3層のニューラルネットワークが、この概念数値を前述の256個の脳波要約数値へと変換する。

学習には、大学のボランティア88名を対象とした2つの過去の実験データが使用された。被験者は、快・中立・不快に分類された計360枚の自然な写真を閲覧し、128個の頭皮センサーと1つの参照センサーを用いて、毎秒500サンプルの精度で脳活動が記録された。まばたきや動作ノイズを除去した後、1.5秒間のクリーンな試行データ13,640件がモデルのトレーニングに活用された。

背景・業界の文脈

脳波計(EEG)は、頭皮上の微小な電圧変化をミリ秒単位で測定する手法であり、特定の刺激に対する「イベント関連電位」を抽出するために、通常は同じ刺激を何度も繰り返し提示して平均化する作業が必要となる。近年のAI研究では、脳スキャンから物語の内容を再構成する「デコーディング(解読)」に焦点が当てられてきたが、画像やフレーズから脳波を予測する「エンコーディング(符号化)」への注目は相対的に低かった。今回の開発は、2023年の1,854のオブジェクトカテゴリをカタログ化したマルチモーダル神経イメージングプロジェクトなどの知見を基盤としている。

今後の展望

リード著者のAlejandro Santos-Mayo氏は、科学の根本的な目的は自然を観察するだけでなく、予測を通じて理解することにあると述べている。Concept2Brainは、無料のオープンアクセスツールとして公開されており、ユーザーはウェブサイト上で画像をアップロードしたりテキストを入力したりすることで、シミュレートされた脳波レスポンスをダウンロードできる。これにより、神経生理学的な構成要素が脳内でどのように現れるかについての深い理解が進むことが期待される。

元記事: https://www.psypost.org/scientists-built-an-ai-called-concept2brain-that-simulates-human-brain-waves-from-pictures-and-text/

毎週の技術動向レポートを無料でお届け

各分野の分析レポートを読む価値があるかどうか一目で判断できるインフォグラフィックをメールで受け取れます。

📢 メールマガジンに無料登録(週刊・技術動向レポート)

ご登録いただくと、Troy-Technical から週刊で技術動向レポート(メールマガジン)をお届けします。

  • 取得したメールアドレス・選択分野は配信目的にのみ使用します。
  • 第三者へ提供することはありません。
  • 配信はいつでも解除できます(各メール下部のリンクから)。

詳しくはプライバシーポリシーをご覧ください。

登録は1分・いつでも解除できます

この記事は Troy-Technical が公開しています。素材メーカーで技術開発に携わってきた技術者が、個人で運営しているサイトです。
運営者について / お問い合わせ info@troy-technical.jp
よかったらシェアしてね!
  • URLをコピーしました!
  • URLをコピーしました!

この記事を書いた人

目次