コンテンツ科学研究室

ニュース

2020年11月10日: 松平茅隼君が「Imageability estimation using visual and language features」という題目の研究をICMR2020で発表しました．

2020年10月16日: 梅村和紀君の「Estimating the imageability of a sentence for image caption evaluation」という題目の論文がMMM2021で採択されました．

2020年9月14日: 梅村和紀君が「心像性に基づく画像キャプショニングの検討」という題目の研究でMVE賞を受賞しました．

2020年4月1日: コンテンツ科学研究室が独立しました．

最新の研究内容

単語概念の心像性推定

人間の感覚を定量化するため単語の心像性推定について研究しています.



心像性に基づく画像キャプショニング

画像キャプションの実際に用いられる用途に応じたキャプションの生成を目指しています．



色に基づく文書内容の可視化

書籍を対象とし，ページ単位でその文書内容に応じた彩色を行なう手法について研究をしています．



擬態語

歩容を擬態語で記述したり，逆に擬態語から歩容を生成したりするフレームワークの構築を目指しています．

最新の研究成果

Tell as you imagine: Sentence imageability-aware image captioning. Kazuki Umemura, Marc A. Kastner, Ichiro Ide, Yasutomo Kawanishi, Takatsugu Hirayama, Keisuke Doman, Daisuke Deguchi, Hiroshi Murase. MultiMedia Modeling -27th Int. Conf., MMM2021, Prague, Czech Republic, June 22-24, 2021, Procs., Part II, Jakub Lokoč, Tomáš Skopal, Klaus Schoeffmann, Vasileios Mezaris, Xirong Li, Stefanos Vrochidis, Ioannis Patras eds., Lecture Notes in Computer Science, vol.12573, pp.62-73, Prague, Czech Republic, To be published in June 2021.

ColAtt-Net: In reducing the ambiguity of pedestrian orientations on attribute-aware semantic segmentation task. Mahmud Dwi Sulistiyo, Yasutomo Kawanishi, Daisuke Deguchi, Ichiro Ide, Takatsugu Hirayama, Hiroshi Murase. IEEJ Trans. Electrical and Electronic Engineering, vol.141?, no.2?, pp.???-???, February 2021.

光線方向の違いを考慮したライトフィールド特徴量の提案−物体形状とカメラ姿勢に頑健な画像対応付け−. 清水政行, 川西康友, 出口大輔, 井手一郎, 村瀬洋. 精密工学会誌, vol.87, no.2?, pp.xxxx-xxxx, February 2021.

LFIR2Pose: Pose estimation from an extremely low-resolution FIR image sequence. Saki Iwata, Yasutomo Kawanishi, Daisuke Deguchi, Ichiro Ide, Hiroshi Murase, Tomoyoshi Aizawa. Proc. 27th IAPR Int. Conf. on Pattern Recognition (ICPR2020), no.PS-T2.2, pp.2597-2603, Online, January 2021.

Median-shape representation learning for category-level object pose estimation in cluttered environments. Hiroki Tatemichi, Yasutomo Kawanishi, Daisuke Deguchi, Ichiro Ide, Hiroshi Murase, Ayako Amma. Proc. 27th IAPR Int. Conf. on Pattern Recognition (ICPR2020), no.PS-T3.10, pp.4473-4480, Online, January 2021.

Ω-GAN: Object manifold embedding GAN for image generation by disentangling parameters into pose and shape manifolds. Yasutomo Kawanishi, Daisuke Deguchi, Ichiro Ide, Hiroshi Murase. Proc. 27th IAPR Int. Conf. on Pattern Recognition (ICPR2020), no.PS-T1.3, pp.7945-7952, Online, January 2021.

食メディア研究の歴史を振り返って. 井手一郎, 森信介, 橋本敦史. HCGシンポジウム2020, オンライン, December 2020.

名古屋大学における学部初年次データ科学教育の展開に向けて. 井手一郎. 数理・データサイエンス教育強化拠点コンソーシアム中部・東海ブロックワークショップ, 滋賀大, November 2020.

Imageability estimation using visual and language features. Chihaya Matsuhira, Marc Aurel Kastner, Ichiro Ide, Yasutomo Kawanishi, Takatsugu Hirayama, Keisuke Doman, Daisuke Deguchi, Hiroshi Murase. Proc ACM Int. Conf. on Multimedia Retrieval (ICMR) 2020, pp.306-310, Online, October 2020.

Modeling eye-gaze behavior of electric wheelchair drivers via inverse reinforcement learning. Yamato Maekawa, Naoki Akai, Takatsugu Hirayama, Luis Yoichi Morales, Daisuke Deguchi, Yasutomo Kawanishi, Ichiro Ide, Hiroshi Murase. Proc. 23rd IEEE Int. Conf. on Intelligent Transportation Systems (ITSC2020), no.MoAT5.4, pp.158-164, Online, September 2020.