Ремастеринг старого аниме с помощью нейронных сетей

SergejVolkov
0 / 0310
Бывало ли, что, смотря старое аниме, вы про себя думали: "А эта вещь хороша, жаль что ее нет в хорошем качестве..." Если да, то обратите внимание на данный топик.Мне повезло заниматься курсовым проектом, целью которого является улучшение качества одного конкретного старого тайтла, который на данный момент доступен только в виде VHS/LD/DVD рипа. Итоговое качество должно быть что-то около HD 1080p: пропавшие детали восстановлены, увеличена резкость, а картинка очищена от шумов и артефактов. Кроме того, мы надеемся не просто использовать имеющиеся алгоритмы, а попытаться получить лучшие результаты с помощью собственной архитектуры. Нашим руководителям удалось выбить неплохие облачные вычислительные ресурсы у одной крупной китайской IT компании, так что результаты кажутся многообещающими.Слева обычный апскейл, справа - обработка нейросетью.Проблема только одна: какое аниме выбрать. Прошу всех неравнодушных предлагать свои варианты в комментариях! Пожалуйста, опишите парой предложений, чем хорош предлагаемый тайтл, и почему именно он должен стать тем самым единственным. По возможности, неплохо было бы указать, в каком качестве (лучшем из имеющихся) доступен тайтл. По возрастанию сложности ремастеринга и ухудшению исходного качества порядок такой:DVD > LD > VHSПожалуйста, если есть возможность, проверяйте, не вышел ли ваш тайтл в хорошем качестве, прежде чем предложить его! Возможно, вы будете приятно удивлены.Предложенные тайтлы будут добавляться в коллекцию, а затем, возможно, устроено голосование, посмотрим, как пойдет.Итоги нужно подвести до 18.02.21, так что не упустите свой шанс!UPD Голосование будет открыто утром в субботу 12.02.21.UPD Идет голосование. Здесь можно ознакомиться с кандидатами. Калифорнийский кризис: AMV (исполнитель Михо Фудзивара)youtube Звездная девочка Ёко Ямамото: эндинг от Масами Окуи (Rinbu Revolution, опенинг Утэны)vk Долгих лет жизни, предки! : The Guard Dog of Time (Референсится "Перестройка" в СССР)youtube Похититель Душ: опенинг от JAM Project (The Hero, опенинг Ванпанчмен)youtube Акробунч, легенда волшебной страны: Gattai (Анимация Кадзухиро Оти, работал в профессиональном аниме с возраста 16 лет)youtube Доминион: Танковая полиция: Hey Boyyoutube Беги, Мелос! : трейлер (раскадровка Хироюки Окиура, режиссер Оборотни)youtubeПрежде чем сделать свой выбор, пожалуйста, ознакомьтесь с видеороликами выше, описаниями тайтлов, при желании — скриншотами кадров; можно глянуть пару минут из первой серии. Ваша сознательность — залог объективности голосования!Из кандидатов были отобраны самые качественные, оригинальные и востребованные тайтлы, чтобы у голосующих не разбегались глаза. При выборе учитывались качество графики и анимации, отзывы и комменты на Шики и MAL, рейтинг, год выпуска, жанровая принадлежность и прочее. Из нескольких схожих кандидатов выбирался один самый-самый.Помните, что при выявлении нарушений в ходе голосования, его результаты могут быть аннулированы. Пожалуйста, не поддавайтесь соблазну. Не забывайте, что автор коллекции в любом случае оставляет право финального выбора за собой, а голосование призвано помочь ему в этом.UPD Голосование окончено.
[poll=2912]
UPD Появились первые скромные результатыyoutubeyoutubeUPD Опенинг в 1080pyoutubeВидео-сравнение различных методов апскейлинга с нашим:youtubeUPD Содержательная часть проекта завершилась, улучшенная версия аниме "Похититель душ" доступна для ознакомительного просмотра. Качество Full HD, разрешение видео 1920x1080, кодек x264, битрейт 9300-12500 kbps, 24fps.Из отчета о курсовом проекте:Главным преимуществом опубликованного видеоряда является отличное качество контуров (линий) у рисованных персонажей и задних фонов, на улучшении которых были сосредоточены основные наши усилия. Тонкие и ровные линии и резкие детали придают картинке более современный вид, поэтому мы надеемся, что наша версия в хорошем качестве поможет обратить внимание зрителей на забытый, но весьма оригинальный и нетривиально нарисованный мультфильм, главное достоинство которого, по мнению экспертов, заключается в графике Акиюки Симбо, одного из самых успешных режиссеров аниме в истории, то есть как раз в визуальной части.Нам удалось достичь отличного качества генерируемых изображений. Резкость наших результатов превосходит таковую у general case алгоритма RealSR, который на данный момент является SotA в области сверх-разрешения в реальных условиях (SR In The Wild). В области целевого домена мы не просто надежно выигрываем в визуальном качестве у бесплатных утилит и плагинов, но и опережаем лучшие платные продуктовые решения по улучшению качества изображений, такие как TOPAZ Video Enhancing Engine.Из всех аналогов к нашим результатам приблизился только Let’s Enhance AI — платное программное обеспечение, предоставляющее возможность улучшить 5 первых изображений бесплатно, но даже для него шум в целевом домене представляет непреодолимую сложность. Несмотря на немного лучшую по сравнению с нашими результатами резкость задних фонов (которые гораздо больше похожи на фотографии, чем рисованные персонажи), обработка линий и заливок не так хороша, а больше похожа на наши результаты обучения RealSR на DIV2K, с неровностями, шумом и артефактами.Сравнение лучших аналогичных алгоритмов с нашим:СсылкиRealSRWaifu2xLet's EnhanceAnime4kTOPAZ Video Enhancing Enginedrive.google.com (Серии 1-6)drive.google.com (Серии 7-13)
DVD
LD
VHS
Сёдзё / Кодомо 70-х с одинаковыми обложками без описания
Без описания
В скором времени ожидается ремастер от студии / Создатели делают недвусмысленные намеки
Комментарии

Нет комментариев

назад
Твой комментарий
Вернуться к редактированию
Предпросмотр
Скрыть