15 марта 2020

Просто добавь нейросеть: 7 исторических фильмов в 4K и 60 FPS

Пишу, перевожу и иллюстрирую IT-статьи. На proglib написал 140 материалов. Увлекаюсь Python, вебом и Data Science. Открыт к диалогу – ссылки на соцсети и мессенджеры: https://matyushkin.github.io/links/ Если понравился стиль изложения, упорядоченный список публикаций — https://github.com/matyushkin/lessons
Москва, Париж, Нью-Йорк и Англия времен Прекрасной эпохи, Луна и Марс начала космических путешествий – видео, качество которых улучшено с помощью нейросетей. Приятного просмотра!
Просто добавь нейросеть: 7 исторических фильмов в 4K и 60 FPS

Как были обработаны видео

Оригинальные видео обработаны Денисом Ширяевым с помощью известных алгоритмов, использующих нейросети. Ранее мы уже упоминали о замечательном телеграм-канале Дениса @denissexy.

Обсудим немного детальнее, в чём заключаются улучшения видеороликов.

Повышение кадровой частоты (англ. frames per second, FPS). Нейронная сеть, обученная с помощью искусственно замедленных фильмов, генерирует промежуточные кадры, которые вставляются между теми, что уже присутствуют в фильме. Это позволяет сделать движение более плавным. Даже 14 кадров в секунду достаточно, чтобы получить 60 кадров в секунду.

Улучшение разрешения до 4K. Нейронная сеть «дорисовывает» недостающие детали, увеличивая разрешение кадра в 4 и более раз.

Колоризация. Хотя окраска не является исторически точной, она выглядит довольно естественной. Цветную картинку наша собственная сеть нейронов воспринимает как более комфортную.

Прибытие поезда на вокзал Ла-Сьота

Один из первых фильмов, снятых и публично показанных братьями Люмьер. Премьера фильма состоялась в январе 1896 года. Качество оригинального видео было улучшено до 4K с помощью Gigapixel AI. Есть и колоризованная версия.

Прогулка, Париж конца 1890-х годов

Париж во времена Прекрасной эпохи, 1896-1900 гг. Оригинальное видео.

Москва, Тверская улица, 1896

Оригинальный фильм снят в мае 1896 г. Шарлем Муассоном из компании Lumière.

Английские рабочие, 1901

В этом видео собраны различные фрагменты, снятые Митчеллом и Кеньоном в Северной Англии в 1900–1901 гг. Демонстрируются некоторые более мрачные качества работы тех дней.

Список оригинальных источников:

Прогулка по Нью-Йорку, 1911

Снято шведской компанией Svenska Biografteatern.

Аполлон 16: Лунный Ровер, 1972

На этом видео астронавт Чарльз Дьюк заснял на 16-мм пленку то, как другой астронавт – Джон Янг – совершает демонстрационную поездку на «Ровере», выполняя заранее оговорённые на Земле манёвры.

Посадка Curiosity на Марс, 2012

Улучшенная версия видео Барда Каннинга о спуске марсохода Curiosity 6 августа 2012 г.

***

Хотите узнать, как работают нейросети? У нас есть наглядное введение на примере распознавания цифр. А если вам просто интересны достижения, недавно мы делали подборку о том, что уже умеют нейросети.

Источники

МЕРОПРИЯТИЯ

Комментарии

ЛУЧШИЕ СТАТЬИ ПО ТЕМЕ