JavPlayerのモザイク除去のアルゴリズムを比較

人工知能を使った映像の高解像度化技術によって、ここ数年で飛躍的な進化を遂げたモザイク除去。そして、AIを使ったモザイク除去で使われるツールが「JavPlayer」です。2020年5月に突如開発がストップしましたが、2021年末に開発が再開。更新後のJavPlayerには続々と新機能が追加されているのです。リアルタイムで除去する姉妹ソフト「JavPlayerEZ」もあります。

JavPlayerでBasicVSR++を使用する

「JavPlayer」は、TecoGANという高解像度化AIを用いてモザイク部分を高解像度化するメディアプレーヤー。更新後のJavPlayerには続々と新機能が追加されており、現在は「BasicVSR++」という高解像度化AIのテストが行われています。

このようにJavPlayerの最新版2.0ではTecoGANだけでなく、さまざまな超解像AIが選べるようになっています。用途別でJavPlayerで重複しているAIもありますが、進化していることは間違いないでしょう。

「TecoGAN」はリリース当初から採用されているJavPlayerの基本となるモザイク除去の超解像AI。TecoGANのGANは、Generative Adversarial Network（敵対的生成ネットワーク）と呼ばれるAIの一種です。元の画像データを4倍の解像度にする機能を搭載しています。

「Real-ESRGUN（REG6B）」は、2回目用。画像生成AIのアップスケーラーとしてよく使われる静止画用の超解像AI。負荷が高く、動作が激重なのがデメリットです。

JavPlayer最新版に高速アルゴリズム

「BasicVSR++」はJavPlayerに2番目に搭載されたAI。高精細で安定した画像生成が売りです。CUDAが使えるGPUが必須で、処理に時間がかかるのが難点。CUDAとはNVIDIA製GPU専用のプログラミングモデルです。

JavPlayerに搭載された「IMDN」は2回目用。こちらもREG6B同様に静止画用の超解像AI。高速処理が売りのアルゴリズムではあるのですが、ノイズが増える傾向があります。

JavPlayerに搭載されている「TecoGAN8X」はTecoGANの進化系。先日、JavPlayerに追加されたばかりの新しい超解像AIで、解像度を8倍にすることが可能。JavPlayerでより鮮明な映像を実現します。

JavPlayerでモザイク除去を比較した

JavPlayerでモザイク除去の精度を比較した

JavPlayerに搭載された「REG6B＆IMDN」はReal-ESRGUNとIMDNの結果から、ディティールを生成します。3回も超解像AIを使いますが、必ずしもJavPlayerで高品質になるとは限りません。

このうち、JavPlayerでBasicVSR++を使用するにはNVIDIAのCUDA11を使う必要があり、ハイエンドGPUも必須となるためハードルはやや高め。ちなみに、BasicVSR++を使ったエロアニメ用のモザイク除去も試作中だといいます。

というわけで、JavPlayerに新たに導入されたBasicVSR++を使ったモザイク除去の精度を、従来のTecoGANと比較してみました。比較には、昔のビデ倫準拠の大きいモザイクと現在の同人AVレベルの細かいモザイクを用意しています。

JavPlayerでモザイク除去を比較した

JavPlayerの超解像度パッチの選択では、デフォルトが「tgmain」（TecoGAN）になっています。BasicVSR++を使う場合は、ここで「SR-BVPP」を選択するのです。

JavPlayerでTecoGANとBasicVSR++でモザイク除去を比較してみたところ、大きいモザイクはいずれも除去できず、造形が大きく崩れてしまいました。一方、細かいモザイクではどちらも認識できるレベルにはなりました。

若干ではありますが、BasicVSR++の方がディテールの再現度は高いように見えます。まだテスト段階なので、これからの発展に期待したいところです。

JavPlayer2.0でサンプル動画をテスト

複数の超解像AIが使えるようになったJavPlayer最新版2.0ですが、はたしてどのAIが最も高精度にモザイクを除去できるのでしょう。それぞれ学習モデルが違うため、映像ソースによって一長一短はあるはずです。そこで「顔」と「一定の速さで動くもの」で、その精度を検証しました。

JavPlayer2.0ではアニメに特化したAIも搭載されていますが、今回は実写映像を想定。モザイクの大きさも大小2パターンを用意し、2回目用の超解像AIも検証しました（1回目はTecoGANを使用）。JavPlayer2.0の最新モザイク除去の精度はいかに…？

今回、JavPlayer2.0でテストしたサンプル動画は、アダルト動画で頻出する顔へのモザイク映像と、動くものへのモザイク映像を再現。動くモノに対してどれだけ精度の高いモザイク除去が可能か比較しました。まずは、高い精度が求められる顔のモザイク除去について、JavPlayer2.0で検証。ただし、大きなモザイクに関しては残念ながら実用レベルとはいえない精度でした。

JavPlayerのモザイク除去のアルゴリズムを比較