株式会社セプテーニ(本社：東京都新宿区、代表取締役社長：清水 雄介、以下「セプテーニ」)と、東京大学 大学院情報理工学系研究科・山崎研究室による共著論文が、パターン認識分野の国際会議「International Conference on Pattern Recognition（ICPR）」にて採択されました。

　パターン認識国際会議「International Conference on Pattern Recognition（ICPR）」は、パターン認識国際連盟「International Association on Pattern Recognition（IAPR）」が2年に1度開催するパターン認識に関する世界最大規模の国際会議です。


【「International Conference on Pattern Recognition（ICPR） 2020」について】
https://www.micc.unifi.it/icpr2020/



【共著論文について】
■論文タイトル
「Predicting Online Video Advertising Effects with Multimodal Deep Learning」


■発表者（発表当時）
池田 純　　　 　（東京大学 大学院情報理工学系研究科 電子情報学専攻 修士課程）
勢〆 弘幸　　　 （Septeni Japan株式会社 データ事業本部）
WANG Xueting （東京大学 大学院情報理工学系研究科 電子情報学専攻 特任助教）
山崎 俊彦　　　 （東京大学 大学院情報理工学系研究科 電子情報学専攻 准教授）


■研究概要
セプテーニは、東京大学 大学院情報理工学系研究科 電子情報学専攻・山崎研究室との共同研究により、動画広告の動画・言語特徴やその他入手可能なデータを用いて広告配信前に高精度に効果(ここではクリック率)を予測する技術を実現しました。
画像広告の効果予測については多くの研究がなされていますが、動画広告については先行研究事例が少なく、発展途上の段階です。
本研究では、動画，テキスト，メタデータといった複数種類のデータに対して、マルチモーダルな学習をおこなうことで広告効果を予測する手法を考案しました。


■研究詳細
＜研究背景と経緯＞
セプテーニでは、東京大学 大学院情報理工学系研究科・山崎研究室と2018年より産学連携を進めており、これまで蓄積してきた広告クリエイティブに関するデータをもとに、ディープラーニング（深層学習）をはじめとする機械学習技術により、クリエイティブ単位での広告効果の事前予測、予測根拠となった要因の可視化、改善案の提示・美的感覚の調整といった制作サポートの実現を目指して研究を進めてまいりました。


＜研究内容＞
このような取り組みのもと、今回採択された共著論文「Predicting Online Video Advertising Effects with Multimodal Deep Learning」では、動画・言語特徴やその他入手可能なデータを用いて広告配信前に高精度に効果(ここではクリック率)を予測する技術と、どの動画フレームが効果寄与しているかを可視化する技術を実現しました。
動画，テキスト，メタデータといった複数種類のデータに対して、マルチモーダルな学習をおこなうことで広告効果を予測する手法を考案しました。さらにメタデータにおいてカテゴリ型と連続型の2つのタイプを適切に分類し、正規化しており、過学習を回避する手法を考案しています。
一般的な映像情報のみを使った手法ではクリック率 (Click Through Rate, CTR)の予測相関係数が0.485であったのに対し、本提案手法では予測相関係数0.695と、大幅な精度向上を確認しました。
また、動画内のどの領域が広告効果に寄与しているかを可視化する手法については、深層学習のアテンション機構を動画フレームに適用し、どのフレームがどの程度広告効果に寄与しているかについて可視化しました。


■今後の応用と展開
今回提案された手法により、多数の動画広告クリエイティブの配信検証プロセスを省略でき、配信開始時から広告効果の高いクリエイティブを優先的に選択することが可能となります。
今後は、AIによる自動広告生成や広告制作支援への発展などに力を尽くしてまいります。


【本論文・研究に関するお問合せ】
Septeni Japan株式会社　データ事業本部　住友・伊藤
E-mail：ai_sep@septeni.co.jp


【報道に関するお問合せ】
株式会社セプテーニ・ホールディングス　広報部 広報課　小船戸・大沼
E-mail：koho@septeni-holdings.co.jp
Tel：03-6857-7258
Twitterアカウント：https://twitter.com/Septeni_PR

Facebookページ　 ：https://www.facebook.com/septenigroup



■株式会社セプテーニの会社概要
主な事業内容　　デジタルマーケティング支援事業
本社所在地　　　東京都新宿区西新宿8-17-1　住友不動産新宿グランドタワー28F
代表者　　　　　代表取締役社長　清水 雄介
会社URL　　　　https://www.septeni.co.jp/