2008年度 コラボレーション型研究支援資金 感性データベースによるダイナミック装飾メディア・システムの研究開発 研究成果報告

本プロジェクトの背景および目的

本研究は、8年間にわたって開発を行った感性データベースシステムの新しくかつ大規模な応用として、感性データベースシステムをメディア装飾に適用するダイナミック・装飾メディア・システムの実現を行うものである。"状況,文脈に応じて動的に変化するダイナミック・装飾メディア"という概念を提案し、作品の作成者側、作品の鑑賞者側の両サイドがそのダイナミック装飾メディアという新たな創造の場での創発活動を行なうシステムを実現する。このシステムは、(1)感性データベース技術(清木)、(2)鑑賞者の状況、文脈を動的に把握する"ユビキタス・コンピューティング(徳田)"、(3)状況に合致するデザイン装飾を定義する知識体系構築(脇田)の3者による緊密な共同的設計によるSFCならではの共同研究型体制により実現できる。本システムは、主役メディア(例えば、音楽)を装飾する対象として、その周辺の脇役メディア(画像、映像など)による全体の"動的装飾デザイン"を生み出すものである。

2008年度の活動報告

2008年度 コラボレーション型研究支援資金 感性データベースによるダイナミック装飾メディア・システムの研究開発

本研究が実現する"ダイナミック装飾メディア・システム"は、新しい時代の遠隔共同研究環境を実現するプラットフォームを目指すものである。この新しい形態のメディア創造についての招待論文を,The 6th Asia Pacific Conference on Conceptual Modeling (APCCM)にて発表した.

さらに,感性データベースシステムに関連する国際会議・ワークショップの開催2件(The 18th European Japanese Conference on Information Modelling and Knowledge Bases, Tsukuba, Japan, June 2-6, 2008,および,The Second International Workshop on World-Wide Knowledge Sharing and Analysis, Tampere University of Technology, Pori, Finland, March17-19th, 2008),招待講演2件を行い,フィンランドのタンペレ工科大学(Tampere University of Technology)およびユバスキュラ大学(University of Jyuvaskyla)との連携を行った. また,具体的な実証実験として,装飾メディア応用システム設計・構築,および, 鑑賞者の文脈、状況把握およびそれに合致する動的装飾メディアの設計・構築を行い,感性データベースによるダイナミック装飾メディア・システムのプロトタイプシステムを実現した.具体的には、以下の4項目を実行した。

  1. 装飾メディア応用システム設計1:自動装飾機能つき音楽鑑賞環境設計、構築:音楽メディアを対象とした感性計量システムを適用し、音楽の感性的特徴に合致する画像メディア、映像メディアを自動選択、表示するシステムの設計、構築
  2. 装飾メディア応用システム設計2:自動装飾機能つき画像(色彩情報)絵画、映像鑑賞環境設計、構築:画像、映像メディアを対象とした感性計量システムを適用し、感性的特徴に合致する周辺メディア(音楽など)を自動選択するシステムの実現
  3. ユビキタスコンピューティング技術により、自動的に、鑑賞者状況および表現DISPLAYの状況を把握、認識し、その状況に合致する音楽、画像、映像の選択、表示機能の設計、構築
  4. ユーザの状況、文脈の獲得、蓄積、感性的計量方法のシステム化および実装
プロトタイプシステムの実装と実証実験の実施
プロトタイプシステムの実装と実証実験の実施

主要な学術的成果

  1. Yasushi Kiyoki and Xing Chen, A Semantic Associative Computation Method for Automatic Decorative Multimedia Creation with "Kansei" Information, Invited Paper, The 6th Asia Pacific Conference on Conceptual Modeling (APCCM), Wellington, New Zealand, 9 pages, Jan. 20-23, 2009
  2. Shiori Sasaki, Yusuke Takahashi and Yasushi Kiyoki, FUTURISTEXT: THE 4D WORLD MAP SYSTEM WITH SEMANTIC, TEMPORAL AND SPATIAL ANALYZERS, Proceedings of the IADIS e-Society 2008 Conference, Algarve, Portugal, 162--170, April 2008
  3. Wenxing Peng, Taro Terao, Yoshihiro Masuda, Naofumi Yoshida, Jun Miyazaki, Document History System and its Application to Abnormal Document Access Pattern Detection with a Probabilistic Model, In proceedings of 22nd International Conference on Advanced Information Networking and Applications (AINA 2008), 486--493, Mar. 2008
  4. Fujiko Yara, and Yasushi Kiyoki, A Continuous Media Data Rendering System With Sub-Media For Representing The Story Line of Main-Media, The 12th IASTED International Conference on Internet and Multimedia Systems and Applications (IMSA2008), 48--54, Aug. 2008
  5. Shuichi Kurabayashi and Yasushi Kiyoki, A Collaborative and Evolutional Active Rule Network for Dynamic Data on the Web, In Proceedings of The IASTED International Symposium on Distributed and Intelligent Multimedia Systems(DIMS2008), Orlando, Florida, USA, 443--448, November 16-18, 2008
  6. Sahori Imai, Shuichi Kurabayashi, and Yasushi Kiyoki, A Music Database System with Content Analysis and Visualization Mechanisms, In Proceedings of The IASTED International Symposium on Distributed and Intelligent Multimedia Systems(DIMS2008), Orlando, Florida, USA, 455--460, November 16-18, 2008
  7. Shlomo Dubnov and Yasushi Kiyoki: Opera of Meaning: film and music performance with semantic associative search, Information Modelling and Knowledge Bases(to appear), Vol. Vol. XX, pp.20 pages, 2009.
  8. Hideyasu Sasaki and Yasushi Kiyoki: Multimedia Digital Library as Intellectual Property, Mah- bubur Rahman Syed (Ed.) Multimedia Technologies: Concepts, Methodologies, Tools, and Appli- cations (3 Volumes), Vol. Chapter XXIII, No. IGI Press, Hershey, PA, USA., June, 2008.
  9. Xing Chen, Yasushi Kiyoki, Kosuke Takano, and Keisuke Masuda: A Semantic Space Creation Method with an Adaptive Axis Adjustment Mechanism for Media Data Retrieval, Information Modelling and Knowledge Bases, Vol. Vol. XIX, pp.20 pages, May 2008.
  10. Hideyasu Sasaki and Yasushi Kiyoki: Frameworks for Intellectual Property Protection on Mul-timedia Database Systems, Information Modelling and Knowledge Bases, Vol. Vol. XIX, pp.8 pages, May 2008.
  11. Hanako Kariya, Yasushi Kiyoki: Metadata Extraction and Retrieval Methods for Taste-impressions with Bio-sensing Technology, Information Modelling and Knowledge Bases, Vol. Vol. XIX, pp.20 pages, May 2008.
  12. Marie DUZI, Anneli HEIMBURGER, Takehiro TOKUDA, Peter VOJTAS, and Naofumi YOSHIDA: Multi-Agent Knowledge Modelling, Information Modelling and Knowledge Bases, Vol. Vol. XX, pp.18 pages, 2009.