Как были обработаны видео

Оригинальные видео обработаны Денисом Ширяевым с помощью известных алгоритмов, использующих нейросети. Ранее мы уже упоминали о замечательном телеграм-канале Дениса @denissexy.

Обсудим немного детальнее, в чём заключаются улучшения видеороликов.

Повышение кадровой частоты (англ. frames per second, FPS). Нейронная сеть, обученная с помощью искусственно замедленных фильмов, генерирует промежуточные кадры, которые вставляются между теми, что уже присутствуют в фильме. Это позволяет сделать движение более плавным. Даже 14 кадров в секунду достаточно, чтобы получить 60 кадров в секунду.

Улучшение разрешения до 4K. Нейронная сеть «дорисовывает» недостающие детали, увеличивая разрешение кадра в 4 и более раз.

Колоризация. Хотя окраска не является исторически точной, она выглядит довольно естественной. Цветную картинку наша собственная сеть нейронов воспринимает как более комфортную.

Прибытие поезда на вокзал Ла-Сьота

Один из первых фильмов, снятых и публично показанных братьями Люмьер. Премьера фильма состоялась в январе 1896 года. Качество оригинального видео было улучшено до 4K с помощью Gigapixel AI. Есть и колоризованная версия.

Прогулка, Париж конца 1890-х годов

Париж во времена Прекрасной эпохи, 1896-1900 гг. Оригинальное видео.

Москва, Тверская улица, 1896

Оригинальный фильм снят в мае 1896 г. Шарлем Муассоном из компании Lumière.

Английские рабочие, 1901

В этом видео собраны различные фрагменты, снятые Митчеллом и Кеньоном в Северной Англии в 1900–1901 гг. Демонстрируются некоторые более мрачные качества работы тех дней.

Список оригинальных источников:

• Шахтеры покидают шахту Пендлбери
• Выход рабочих Alfred Butterworth and Sons, Глеб Миллс, Холлинвуд (1901)
  
• Рабочие Parkgate Iron and Steel Co., Ротерем (1901)
  

Прогулка по Нью-Йорку, 1911

Снято шведской компанией Svenska Biografteatern.

Аполлон 16: Лунный Ровер, 1972

На этом видео астронавт Чарльз Дьюк заснял на 16-мм пленку то, как другой астронавт – Джон Янг – совершает демонстрационную поездку на «Ровере», выполняя заранее оговорённые на Земле манёвры.

Посадка Curiosity на Марс, 2012

Улучшенная версия видео Барда Каннинга о спуске марсохода Curiosity 6 августа 2012 г.

Хотите узнать, как работают нейросети? У нас есть наглядное введение на примере распознавания цифр. А если вам просто интересны достижения, недавно мы делали подборку о том, что уже умеют нейросети.