![Banner small](../assets/banner-small-2021.png)
![Banner large](../assets/banner-2021.png)
マルチメディア処理(2012年度)
- RESEARCH THEMES (2012)
マルチメディア検索のためのインタラクティブな位置,時間,ソーシャルなクエリ
位置,時間,ソーシャルな要素を有するマルチメディアの大規模コレクションに対する高速で効率の良い検索について検討している.インタラクティブなマルチメディアのクエリにより.複数の検索次元で同時にクエリーの改善を行うことができる.その要件を満たすものとして,スケッチやアイコンを用いるユーザインタラクションを検討している.プロトタイプとして,複数ユーザの旅行データに対して,ユーザインタラクションを実装し,ユーザの移動パターンの検索を行い,簡易な入力,クエリの改善,効率の良い検索を実現した.
Interface Inputs
ResultsDetailed results
System overview
Travel Media Retrieval
ソーシャル,パーソナルなマルチメディア処理
現代社会において我々の生活とますます深い関係になっていくソーシャルネットワーク(Facebook, twitter, and Google+).Facebookの統計によると,2011年ではアクティブユーザが8億人に達し,そのうちの半分以上が一日に1回はサービスを利用しているとのこと.ソーシャルネットワークは密かに我々の生活を変えている.ソーシャルネッ・gワークでは,ユーザは主にマルチメディアファイル(写真や動画)を通じて日々の出来事をつづる.写真やビデオといったマルチメディアファイルを共有することで,人々の日常体験の共有が新しい形で進んでいる.それらのデータは,共有の過程で様々なアノテーションが付されている.一方,我々は,膨大な写真をローカルに有しており,それらには適切なアノテーションが欠落している.写真にとってのWhen,Where, What, Whoをソーシャル属性と定義し,ソーシャルネットワーク上のデータを利用し,ローカルな個人の写真コレクションに対して,ソーシャル属性を付与する研究を進めている.
Social attributes annotation framework
コンピュテーショナル カメラ
特殊な光学系と信号処理を複合するコンピュテーショナルカメラについて検討を進めている.それは,特定の目的に関して,従来のカメラの性能を超えることができる.特に,符号化開口を用いるコンピュテーショナルカメラについての取り組みを進めており,それにより,撮像系におけるダイナミックレンジを大きく向上させることができる.符号化開口は,低コストで,実現性が高く,雑音も低減でき,理論的な基盤も比較的シンプルである.
The coded mask is placed in the aperture stop.
Aperture control modified with a coded aperture
Real mask captured with a laser
Two-channel image capture: Each mask capture a different image. These two images are multiplex by the camera Sensor. Later, these two images can be reconstructed again. This process makes possible to shoot two images at the same time.
カメラ画像を用いた将棋の自動局面認識
将棋の対局において棋譜の記録は重要である.アマチュアの対局では棋譜が記録されないことが多い.プロ棋士の対局では記録係が棋譜をとっているが,手作業で記録するのは大変である.また,近年コンピュータ将棋ソフトが強くなっており,コンピュータによる検討も参考になることが多い.本研究では,カメラで撮影された将棋盤の画像を用いて,画像処理を用いて自動で局面を認識する手法の研究を行っている.