約110年前にニューヨークで撮影された映像が、AI技術によりカラー化され復活した。。
その出来栄えは驚くべきものだ。
この映像はもともと、1911年、スウェーデンの製作会社Svenska Biografteaternが、アメリカを訪れた際、ニューヨークの様子をフィルムにおさめたものだ。
【1911年の臨場感あふれるニューヨークの様子】
[動画を見る]
[4k, 60 fps] A Trip Through New York City in 1911
この動画は、ニューラルネットワーク（脳の神経回路をモデル化した分散情報処理システム）を使って画質を高めカラー化したものである。
色をつけただけでなく、フィルムスピードを毎秒60フレームに速めて、画像の解像度を4Kに上げ、よりシャープな映像を復活させた。
[画像を見る]
古いモノクロ写真をAIで自動的に着色してくれるDeOldifyを使って色を加えた。
これは、プラットフォームGitHubで利用可能なオープンソースのAIツールで、AIアルゴリズムの一種である敵対的生成ネットワーク（Generative Adversarial Networks＝GAN)を使用して、動画や画像を修正する。generatorとcriticというふたつのニューラルネットワークを使っている。
「カラー化されるモデルが次のモデルcriticを取り込んでいくよう学習させることから始まります。criticがカラー化を評価し、それをgeneratorに教えて、より解像度の高い画像を生み出していくというプロセスが基本です」クリエーターのジェイソン・アンティックは言う。
「criticモデルもまたニューラルネットワークなので、単純な方法ではできない"本物"らしさを生み出すニュアンスをたくさん理解することができるのです」
【AI技術で復元されるかこの映像】
昨今、AIで復元された昔の映像がもてはやされている。今年始め、リュミエール兄弟が撮影した1896年の「ラ・シオタ駅に到着する列車」という映像が復元された。
列車が駅に到着する場面は、とくにスリリングなものではないが、オリジナルのこの映像が初めて公開されたとき、観客は驚いてのけぞったらしい。
[動画を見る]
The first video in history, and people's reaction to it
初めてこれを見た人々は、パニックになって、列車に轢かれないよう映画館から逃げ出したという逸話すらある。実際に観客が映画館から逃げ出した証拠はないが、だが、もし当時の人々が、以下のカラー化復元されたバージョンを見たら、本当に逃げ出したかもしれない。
リマスターされたカラー映像
[動画を見る]
[DeOldified] Arrival of a Train at La Ciotat (The Lumiere Brothers, 1896)
他にもかつての歴史的映像が次々とリマスターされている。
マーティン・ルーサー・キングの演説
[動画を見る]
DeOldify Colorization Experiment: Martin Luther King - I Have A Dream Speech [HD]
映画『メトロポリス』
[動画を見る]
Metropolis (1927) - DeOldify Restoration Demo. Based on Deep Learning
written by konohazuku / edited by parumo
記事全文はこちら：1911年のニューヨーク市内の映像がAI技術でカラー化。よりリアルな日常の臨場感 http://karapaia.com/archives/52288461.html
編集部おすすめ
