顔の動きにおける時空間ダイナミクスとサブステートが感情信号を支える

動く顔が重要な理由

日常は一瞬の視線、上がる眉、半ばの笑みといった素早いサインに満ちており、それらが社会的なやり取りを導きます。しかし多くの研究は表情を静止写真のように扱ってきました。本研究はより現実的な問いを投げかけます：無言の場合も話している場合も、時間を通して顔がどのように動くかが感情の意味をどのように伝えるのか？

いくつかの核となる動きパターン

研究者たちは43名のボランティアの顔を記録し、幸福、悲しみ、怒りを〈無言の表情〉と〈感情を込めた中立文の発話〉という二つの状況で表出してもらいました。自動顔面解析を用いて、目や頬、口の周りの筋群が数百の微小な時間刻みでどう変化するかを追跡しました。次に数学的手法でこの豊かな動きを、被験者や感情を超えて繰り返し現れる少数の基本パターンに集約しました。

上顔面、下顔面、そして混合信号

無言の表情では、顔のダイナミクスは大きく三つの成分で説明できました：上顔面の動きが支配的な成分、下顔面が支配的な成分、そして上下の動きを結びつける成分です。異なる感情はこれらの成分の時間的な混合から生じます。怒りは上下両領域で強く協調した変化を伴い、幸福は笑顔など下顔面の動作に大きく依存しました。悲しみは三つのパターン全体にわたるより穏やかな変化を示しました。これらの動的な署名でコンピュータ分類器を訓練すると、動きだけから高い精度でどの感情かを判定できました。

発話への感情の重ね合わせ

人が話しながら感情を表す場合でも基本的な考え方は成り立ちますが、パターンの混ざり方が異なりました。三つの成分は発話に必要な口の動きと、感情を示す眉や目の変化とを結びつける傾向がありました。分類器の性能は依然として良好でしたが、無言の場合ほど完全ではなく、発話と感情表出を同時に扱う複雑さを反映していました。これは、顔が少数の運動ブロックを再利用し、言語的要求と感情的表示の両方に合わせて柔軟に形を変えていることを示唆します。

各表情の内部にある隠れたミニ位相

研究チームはさらに秒単位で表情がどのように展開するかを詳しく調べました。運動データをクラスタリングすると、すべての表情に共通して現れる三つの再現的な「サブステート」が見つかりました：動きがほとんどないリラックス期間、表情に入る／抜ける際の速い遷移期間、そして表情が保持される持続期間です。これらのミニ位相は速度や複雑さが感情や発話の有無によって異なりました。例えば、幸福では遷移が特に速く特徴的であり、無言の表情ではサブステートの全体的な配列が発話時よりも構造化されていました。

人の知覚との一致

これらの低次元パターンが観察者にとって重要かどうかを確かめるため、研究者たちは顔上の動く点だけを示す簡略化アニメーションを作り、他の手がかりを除去しました。45名の新たなボランティアがこれらを見てどの感情かを判断しました。人間の選択はモデルの予測と密接に一致し、同じ少数の運動パターンだけで被験者の感情ラベルを偶然を大きく上回る精度で予測できました。これは、送り手と受け手の双方が感情的手がかりのやり取りにおいてコンパクトな顔のダイナミクス集合に依存していることを示します。

日常的な相互作用への含意

総じて、本研究は外見上は豊富に見える顔の振る舞いにもかかわらず、感情の信号化はわずか数個の核となる動きパターンと、表情が立ち上がり、保持され、消えていく際の短い位相によって成り立っていることを示唆します。この簡潔な構造は、多くの顔面筋を効率的に制御しつつ会話中でも明確な感情を伝えるのに役立つ可能性があります。発見はソーシャルロボティクスのような分野で自然な感情表現をモデル化するための設計図を提供し、いくつかの臨床状態で顔のコミュニケーションに微妙だが重要な違いが生じる理由を説明する助けにもなり得ます。

引用: Cuve, H.C.J., Sowden-Carvalho, S. & Cook, J.L. Spatiotemporal dynamics and substates underlie emotional signalling in facial movements. Sci Rep 16, 15686 (2026). https://doi.org/10.1038/s41598-026-46726-0

キーワード: 表情, 感情認識, 顔の運動ダイナミクス, 非言語コミュニケーション, 感情的発話