煌めきディスプレイのソフト開発
「煌めきディスプレイ」とは、イノラックスジャパン株式会社が独自でプロトタイプ開発をしたディスプレイ。従来のディスプレイの表示要素に欠けていた自然界で見える煌めきを、高解像度・高光線度で再現することができます。IMAGICA GROUPでは、コンテンツ制作のためにUnityで使用可能な専用プラグインを開発しています。今回、ディスプレイにさまざまな画像を写し、煌めきを体感できる展示を行いました。
見る方向によって異なる煌めき
特別なメガネ等の装着なしで、見る方向によって異なる煌めきが見られます。色鮮やかなフルーツがのったタルトや、アクセサリー、金貨など、さまざまな対象の質感や煌めきが感じられます。
広告表現などクリエイティブな場面での展開も期待されています。
主要スペックは、ディスプレイ解像度4K UHD（3480×2160）、有効解像度フルHD（1920×1080）相当
煌めきディスプレイに関するお問い合わせ先：
イノラックスジャパン株式会社
https://www.innolux.com/jp/index.html
コンテンツ制作のためのプラグイン開発（ソフトウェア）に関するお問い合わせ：
株式会社フォトロン デジタルリアリティラボ
https://digirea.com/index.html
ライトフィールドディスプレイの研究開発
表情の微細な変化を忠実に再現できる「ライトフィールドディスプレイ」です。虚像結像モードを用いることで、従来よりも視域が広く画面の明るいディスプレイを実現しました。ブースでは、ライトフィールドディスプレイにアニメーションや人の顔を映して展示を行いました。
産学連携による研究開発で特許を出願
東京農工大学とIMAGICA GROUPの共同研究により、このライトフィールドディスプレイの開発が行われています。プロトタイプ制作や性能評価を行い、２件の特許を出願中です。近い将来、実用化を目指して研究を深めています。
ライトフィールドディスプレイは、人の顔を実物大で３次元表示が可能です。裸眼方式で特別なメガネなどは不要のため、多人数で見ることができます。研究を重ね、視域を広く、明るくしました。画像を通して見るとわかりにくいのですが、立体的に表示され、浮き出ているかのように見ることができます。
東京農工大学との共同研究インタビューはこちらご覧になれます。
https://tech.imagicagroup.co.jp/interview-tokyonoukoudaigaku/
東京農工大学 大学院 工学研究院 工学部 電気電子工学科 高木研究室
http://web.tuat.ac.jp/~e-takaki/
IMAGICA GROUP Advanced Research Group
https://tech.imagicagroup.co.jp/
AI音声合成システムお天気キャスター“バーチャル森田さん”の開発
AI技術（深層学習）によってお天気キャスターの森田正光氏の声色をリアルタイムに再現する音声合成システム。パソコンで言葉や文章を打つと、森田氏の声色を再現した音声が流れます。ブースでは、さまざまな言葉を打ち、高速合成をした音声が聞ける実演を行いました。
短時間で収録された学習音声から再現
デモ機に文章を打ったところ、すぐに森田氏の声に変換されて読み上げられました。
実際の音声はこちらからお聞きになれます。
この“バーチャル森田さん”は、東京大学大学院、IMAGICA GROUP、オー・エル・エム・デジタル、ウェザーマップで共同研究を行い開発しました。約40分という短時間の学習用音声から、森田氏の特徴的な声色を残しつつ自然な声色を高速で合成。テレビの放送にも対応できるスピードを可能にしています。
リアルタイムに高速で合成できる強みを活かし、気象解説動画の読み上げや、国内数百地点をカバーする天気予報への活用を目指しています。
東京大学大学院 情報理工学系研究科 システム情報学専攻 第一研究室（猿渡・小山研究室）
https://www.sp.ipc.i.u-tokyo.ac.jp/
IMAGICA GROUP Advanced Research Group
https://tech.imagicagroup.co.jp/
少数のデータから学習されたAIによるアニメ自動彩色の開発
アニメ制作の現場において、作品のクオリティを上げるうえで彩色作業の効率化はとても重要です。アニメ制作の工程で作成される線画とそれを彩色した画像の少数のペアから学習されたAI自動彩色技術について、ブースでモニターを見せながら紹介しました。
２〜４枚の画像から2分程度で彩色用AIの学習が可能
従来は、大量のデータを用いて特定のキャラクターに特化した学習が必要でしたが、奈良先端科学技術大学院大学と千葉大学、IMAGICA GROUPの共同研究による「AI自動彩色技術」は、２〜４枚程度の見本を与えることで彩色対象に特化したAIの学習が可能です。そのため、作品やスタイルの異なる多くのキャラクターに対応することができ、アニメーション制作の現場で適用範囲がとても広いことが特徴です。
学習は２分弱で完了し、1枚あたり3秒程度で見本と似た線画の自動彩色ができます。正確さについても、人の手による彩色と比較して60〜70%程度で正しい彩色ができています。
活用シーンは、アニメ制作の仕上げ工程における彩色作業の補助がメイン。現状はスタンドアローンのツールとして社内で試験運用をしていますが、将来的には自社開発の作画ツールへの組み込みを予定しています。
手作業での負担を減らし、制作者がよりクリエイティブな場面に注力できるよう、作品の品質向上に貢献してまいります。
詳しい自動彩色手法についてはこちらをご覧ください。
https://tech.imagicagroup.co.jp/res/5733/
共同研究インタビューはこちらからご覧になれます。
https://tech.imagicagroup.co.jp/interview-NAIST/
奈良先端科学技術大学院大学 光メディアインタフェース研究室
https://isw3.naist.jp/Research/mi-omi-ja.html
奈良先端科学技術大学院大学 知能コミュニケーション研究室
https://isw3.naist.jp/Research/mi-ahc-ja.html
千葉大学大学院工学研究院 久保研究室
https://qlab2022.github.io/index-jp.html
IMAGICA GROUP Advanced Research Group
https://tech.imagicagroup.co.jp/
