クリエイティブAIを提供するRADIUS5、アニメ4K,8K化AI「AnimeRefiner」に4つの新機能を追加

開発の背景

RADIUS5 では、2020年2月から「AnimeRefiner」の提供を行って参りました。アニメコンテンツホルダーからの依頼を元にAIで高解像度化を行って参りましたが、アニメをより高品質にするには解像度面以外にも様々な改善すべき課題がありました。そこで、Deep Learning やCV（コンピュータビジョン）等の知見を活かして、2-3プルダウン対応、インターレース除去、色味モードの追加、字幕と映像を分離した処理への対応を行いました。

4つの新機能

（1）2-3プルダウン対応

2-3プルダウンとは、毎秒24コマで記録されたアニメを、テレビ放送やVOD（ビデオオンデマンド）などで用いられる毎秒30フレームの映像信号に変換する手法のことです。クライアントが保有するアニメは、2-3プルダウンに未対応の映像であるケースもあるため、AnimeRefiner でも対応できるよう開発いたしました。

（2）インターレース除去

一般的なアナログテレビ信号または1080iフォーマットのHDTV信号などのインターレース映像を非インターレース形式に変換するプロセスのことです。インターレース映像の場合、これまではAnimeRefiner を用いても十分に綺麗にならない場合がありました。Deep Learning を活用したインターレース除去機能を追加したことにより、綺麗にできるアニメの幅が大幅に広がりました。

（3）色味モードの追加

AnimeRefiner では、Deep Learning を用いることで本来の高解像度な色を推定して高解像度化しておりました。しかし、クライアントから色味を完全に変えないでほしいという要望をいただくケースが散見されました。そこで、元々のアニメの色味から99%変わらないモードをはじめ、AIを用いて見栄えがする色味まで複数パターンでアウトプットすることができるモードを追加いたしました。

（4）字幕と映像を分離した高解像度化処理

字幕はアニメを制作後に合成されているため、字幕と映像で異なる処理が行われているケースがあります。そのため、一元的に処理を行うと、アニメを綺麗にすることができても、字幕が綺麗にならないことがあります。そこで、AnimeRefiner では、字幕は字幕だけで処理、アニメはアニメだけで処理を行い、後で合成することで字幕と映像が混在する場面においても綺麗な高解像度化を実現できるようになりました。

※この4つの映像処理に係る問題は、アニメだけでなく実写映像でも問題になる場合が多々あります。RADIUS5 では、実写映像の高解像度化も依頼を受けており、アニメと同様に上記4つの処理に対応することができます。

AnimeRefinerとは？

概要

Deep Learning を活用することで、従来の画像を引き伸ばして中間を補間する変換（アップコンバート）技術では不可能だった、高品質な状態での高解像度化が可能です。高解像度化AI「Photo Refiner」（https://cre8tiveai.com/pr ）で培った独自のAIモデルにより、アニメを縦4倍・横4倍のサイズに高解像度化できます。低解像度な動画と高解像度な動画の特徴を大量に学習したAIは、これまでの技術とは比較にならないほど美しくアニメを高解像度化することができます。

利用方法

アニメをクラウドや郵送などによりRADIUS5 の方でお預かりいたします。その後、AnimeRefiner サーバーで4K,8K化いたします。通常、アニメ12話を1ヶ月半程度で高解像度化してお戻しさせていただきます。なお、特急対応も可能となっております。詳細は以下までお問い合わせください。

https://ja.animerefiner.com/#g_form

会社概要

RADIUS5 では、「人がクリエイティブになれる世界を創る」というビジョンの元、クリエイティブの現場で利用することができるAIサービスの開発に取り組んでいます。

2019年2月にクリエイティブ作業を効率化する様々なAIツールを提供するプラットフォーム「cre8tiveAI」をリリース、2020年2月にはアニメを4Kや8Kに高解像度化できる「AnimeRefiner」をリリースしました。

RADIUS5 では引き続きDeep Learning 技術を用い、非クリエイティブな仕事をAIに置き換え、人がよりクリエイティブな仕事に従事できるようなサービスの開発を続けて参ります。

URL：https://ja.cre8tiveai.com/

　　：https://ja.animerefiner.com/