AIとニューラルネットワークは、Redditユーザーが古い映画を60fpsの4K解像度に変換するのに役立ちました。
映画の歴史の中で最も有名なクリップの1つは、短編映画「ラ・シオタ駅への列車の到着」（またはラ・シオタ駅への列車の到着）です。ルミエール兄弟。 ご想像のとおり、1896年に最初に記録された当時のカメラは音をキャプチャしていなかったため、画像を動かすことはすでに偉業でした。 これで、この映画を4K、60fpsで見ることができます。
AIがピクセルを埋めて、解像度を4Kに上げました
RedditユーザーのDenisShiryaevは、テクノロジーの助けを借りてクラシックを改善することにしました。 彼は、TopazLabsのGigapixelAIというツールを使用して、画像の解像度を4Kにスケーリングし始めました。
このツールを使用すると、元の画像のサイズを大きくしてピクセルを生成し、可能な限り詳細な高解像度を実現できます。 以下の元のビデオを見ることができます：
解像度を向上させることに加えて、彼はフレームレートも上げることができました。 出力をより流動的にする何か。
ご覧のとおり、電車の動きやシーンを歩く人はとてもスムーズに見えます。 動きの途切れはほとんどなく、オリジナルとは全然違います。 ここではAIを使用して余分なフレームを埋めているため、最終的な結果は完全に催眠術になります。
このために、ShiryaevはDAINという名前のツールを使用しました。このツールは、映画の残りの部分と完全に同期した画像で、存在しない穴を埋める一連の非常に複雑なプロセスを実行します。
これを実現するために、分析ツールは、シーンの視覚的な流れ、コンテキスト、およびその深さを検出するために画像を分析します。 次に、フレームに最適な画像を作成するヒートマップを生成します。
そして最後の仕上げとしてサウンドを追加しました。