動画に対するキーポイント検出による姿勢推定技術を用いた定量的行動観察を行うためのPythonスクリプト群です。GUI付きのアプリケーションも提供しています。

行動観察のために開発された動画プレイヤーです。シーン情報(いつ何が起きたかのタグ)を動画ファイルに埋め込むことができるほか、スキップ再生などの豊富な再生機能により観察をサポートします。

作業中の顔観察を目的に作られたゲームです。ゲーム開始と同時にGoProの設定と録画を自動で開始し、プレイヤーの顔を正面から撮影することができます。プレイヤーの誤操作の頻度等も記録します。

時系列データ(CSV形式)から外れ値を探して除去するためのツールです。グラフを目視しながら外れ値を除去することができます。また、欠けたデータを線型補完する機能も備えています。

FACS(Facial Action Coding System)とは、46種類の眼や口の動き(Action Unit)によってその人の表情を記述する方法論です。EkmanはAUの組み合わせから人の感情の推定を試みましたが、表情と感情の関係はコンテキストや文化圏、顔の筋肉の個人差の影響を受けるため、普遍性や再現性には限界があることが分かっています。また、仮に人の感情の推定が可能になったとしても、記述や表現の方法が適切でなければあらぬ憶測や誤解、偏見を助長する恐れがあります。

では個々人に注目して、継続的に、注意深く観察と分析を行えばその人の顔から内的状態や主観的な状況をより的確に推定できるようになるのでしょうか。また、推定結果が及ぼす社会的弊害を最小限に留めつつ、より豊かな生活に役立てるような記述・表現の方法はないでしょうか。西村(英伍)研究室では、人の表情から何を推測し、それを誰にどう記述・表現するべきなのかを研究しています。