• 2021年10月27日(水) 10:30 ~ 17:30

１．マルチモーダル社会的信号処理の導入

　　（１）．マルチモーダル社会的信号処理のための理論

　　（２）．社会言語学の知見

　　（３）．社会心理学の知見

　　（４）．社会的信号処理・マルチモーダル情報処理の課題

２．社会的信号処理に用いるマルチモーダル情報処理のための基礎

　　（１）．音声情報処理

　　（２）．画像情報処理

　　（３）．言語情報処理

　　（４）．生体情報、その他のセンサ情報処理

３．社会的信号処理のためのＡＩ技術

　　（１）．機械学習

　　　　ａ．分類・回帰学習

　　　　ｂ．時系列データの学習

　　　　ｃ．マルチモーダルフュージョン：異種 のモダリティ（言語 、音声、画像など）から得られるデータの統合

　　　　ｄ．マルチモーダル機械学習

　　（２）．データマイニング

　　　　ａ．時系列データからのパターン発見

　　　　ｂ．時系列パターンのクラスタリング

　　（３）．マルチモーダル機械学習の応用

　　　　ａ．音声・言語・画像をミックスさせた情報の表現・理解

　　　　ｂ．マルチモーダルデータの翻訳

　　　　ｃ．運転者の運転特性の比較分析

４．社会的信号処理モデルの構築：認識モデル・推定モデルの作成

　　（１）．データコーパスの収集  

　　（２）．心理学の知見を利用した正解ラベルデータの作成方法

　　（３）．入力モダリティの選定

　　（４）．マルチモーダル特徴量の抽出

　　（５）．マルチモーダル情報の機械学習・評価

　　（６）．モデルを利用した行動解析（スキル推定）への応用例

５．社会的信号処理の応用実例

　　（１）．マルチメディアコンテンツ解析

　　（２）．マルチモーダル感情認識

　　（３）．コミュニケーション・プレゼンテーション能力の推定

　　（４）．運転行動データに基づく認知機能の推定

　　（５）．行動情報に基づくストレス推定

　　（６）．行動データに基づく認知症傾向の推定

　　（７）．マルチモーダル会話ロボット

　　（８）．ユーザの内的状態推定に基づくロボットの会話戦略

　　（９）．ユーザの面接対話スキル判定機能を備えた就職面接訓練エージェントシステム

オンラインセミナー