視覚素材と聴覚素材の調和| 京都工芸繊維大学教授寶珍輝尚先生

京都工芸繊維大学工芸科学部設計工学域情報工学課程教授寶珍輝尚先生

視覚素材と聴覚素材の調和

京都工芸繊維大学
工芸科学部設計工学域情報工学課程

教授寶珍輝尚先生

まずはハイライトで視聴

30分のミニ講義を聴講しよう！視覚と聴覚の相互作用

視覚と聴覚の相互作用として、心理学寄りの基礎的な異系感性相互作用、しゃべり声と映像の相互作用、リズム感のある音楽と映像の相互作用についてお話しします。また、視覚素材と聴覚素材の調和とその重要性についてもお話しします。

先生からのメッセージ

コンピュータは人間の論理的思考を効率的に代行するための機械として発達しました。しかし人間の日常的コミュニケーションでは、感情やイメージといった非論理的な情報も大きな役割を担っています。この「感性」を科学する研究がさまざまな分野で進められており、そのひとつがデータ工学に感性を取り入れようという試みです。
感性をキーとした情報処理は医療や福祉、教育などにも応用が期待でき、広く社会に貢献できるテクノロジーです。まだ世の中にないものを創り上げることに興味があるなら、ぜひ一緒に研究を進めましょう。

先生がめざすSDGs

この先生が所属する大学の情報を見てみよう

京都工芸繊維大学大学案内2023

資料請求

パンフを見る

大学公式ホームページ

夢ナビ講義も読んでみようコンピュータと人間の関係を明るくポジティブに変える「感性情報学」

感性と工学の融合「感性工学」は1980年代後半に日本で生まれて世界へと広がった新しい学問です。イメージや感情、センスといったいわゆる「感性」を科学的に研究して、人間力を重視した豊かな社会づくりに貢献しようとする工学分野です。従来あいまいなものとされていた感性を計測して定量化することで、人間が感じる快適さや心の潤いを、製品やシステム設計などの工学にうまく取り入れることができるようになります。コンピュータによる情報処理に感性を活用する「感性情報学」の研究でも、日本が世界を一歩リードしています。言葉ではなく「印象」で相互に検索例えば画像や動画、音声など、異なるメディアのデータを、言葉ではなく内容の印象に基づいて相互に検索できれば、自分のイメージにぴったり合った映像と音楽を同時に楽しむといったことができます。
まず、各データに対する美しさ、明暗、自然な感じなどの印象とその度合いを心理学的手法で測定します。そこから共通する要素を見出し、各メディアデータの印象を数値で表した空間座標に置き、互いに対応づける、という方法で実現します。「元気を出したい」「清々しい気持ちになりたい」など、気分や個性に合わせて検索結果を変化させることも可能です。ポジティブ・コンピューティングで明るい未来へこの技術をコンピュータと人とのインターフェイスに応用すれば、もっと自由で柔軟なコンテンツ検索や活用ができます。例えば、撮影した動画を自動的に分析してシーンに合ったBGMで演出したり、ドライブの時に車窓の風景やスピードを分析して、その時々にマッチする音楽を自動選曲したり、といったことが可能です。リハビリテーションやメンタルヘルスなどの医療・福祉分野でも、ケースごとに治療やケアに最適な環境づくりへの活用も期待できるでしょう。
あいまいと思われがちな人間の「感性」をコンピュータにより抽出し、新たな活用モデルを構築する感性情報学・感性工学的アプローチの可能性は無限大なのです。