Адрес для входа в РФ: exler.world
Инструмент для восстановления старых фотографий
12.08.2022 11:04
14501
Комментарии (61)
Разработчики из китайской компании Tencent представили бесплатный инструмент GFP-GAN (Generative Facial Prior-Generative Adversarial Network) для восстановления и улучшения старых фотографий.
Вот ролик, в котором они рассказывают, как работает эта технология.
А вот онлайновая версия самого инструмента, который можно опробовать в работе.
Я его погонял на различных снимках.
Сначала старое фото приличного качества, но не особенно четкое. Слева - оригинал, справа - обработка. (На фото, кстати, я сам собственной персоной.) А что - лицо очень прилично вытянули. Понятно, что я бы подобных результатов смог бы добиться в "Фотошопе", но на это ушло бы значительно больше времени, чем те несколько секунд, которые на обработку потратил данный инструмент.
Более старое фото. Тоже очень прилично.
Теперь возьмем совсем некачественное изображение. У мужчины лицо вытянули прям здорово, хотя и не отремонтировали повреждения на фото. Лицо ребенка вытянуть не смогли, но и неудивительно - там деталей нет совсем.
Еще одно, сильно поврежденное фото. Лица вытянули хорошо, но трещины все как были, так и остались. Хотя на примере в ролике алгоритм вроде бы с трещинами должен справляться.
Ну, в общем, интересно, да, для определенных снимков может заметно улучшить качество лиц, однако жалко, что алгоритм трещины не удаляет - это было бы очень полезно.
Если будете пробовать и получите какие-то интересные результаты, поделитесь в комментах, плиз.
Войдите, чтобы оставить комментарий.
Обычное семейное фото, но редактор пишет This image can not be rendered.
Почему не пойму.
Почему не пойму.
На 3.18 сек в ютуб видео показано, что она исправляет переломы/трещинки и прочие дефекты на лице. Воодушевился. Загрузил туда пару десятков старых отсканированных фоток. Результат не вдохновил. Дефекты фото игнорируются, лица после обработки, и при увеличении, оказываются, даже не знаю как сказать, закуклены. Не реалистичны. Кожа лица сглажена, глаза прорисованы аки макияж. Губы перманентны. Но самое забавное, правки касаются только лица, остальные объекты на фото почти игнорируются, как и дефекты. ПС: на одной из фото моего дедушку превратили в баб... дивчину... 😒
А это не история аналогичная гугл фото? То есть выкатили, потому-что нужна data ? А если уж совсем сгущать, то китайцам нужна data вчех рас, на азиатских лицах обучили нейронку, а тепрь вот
Тема сисек не раскрыта.
Загрузил старую фотографию с обнажёнкой, но, судя по всему, алгоритм распознал на предложенной фотографии голые, женские сиськи и заявил что фотография не может быть улучшена.
Загрузил старую фотографию с обнажёнкой, но, судя по всему, алгоритм распознал на предложенной фотографии голые, женские сиськи и заявил что фотография не может быть улучшена.
Заметили появление цвета на лицах? Это не появление, а неполное убирание цвета на тех фрагментах чужих лиц, что использовались для "реставрации".
Ну так побаловаться можно))) Чем лучше изначальное качество фото, тем больше шансов на успех. Востанавливает, основываясь на каких-то своих представлениях о прекрасном.
1) Попробовала " востановить" одну фотографию несколько раз - все результаты разнились, хотя родство просматривалось.
2) На групповом фото другу неповезло запечатлеться в профиль. Ему программа дорисовала лишние нос и губы.
3) Другому товарищу "досталось" - его прога зачем-то состарила лет примерно на тридцать. Исходнику на тот момент было 13))).
Ну и так по мелочи всякого : слишком сильно улыбаешься - зубов тебе побольше. Если моргнул - без глаз остался.
1) Попробовала " востановить" одну фотографию несколько раз - все результаты разнились, хотя родство просматривалось.
2) На групповом фото другу неповезло запечатлеться в профиль. Ему программа дорисовала лишние нос и губы.
3) Другому товарищу "досталось" - его прога зачем-то состарила лет примерно на тридцать. Исходнику на тот момент было 13))).
Ну и так по мелочи всякого : слишком сильно улыбаешься - зубов тебе побольше. Если моргнул - без глаз остался.
Подскажите программу для телефонов Android, которая может из нескольких последовательно сделанных скриншотов экрана сделать одну длинную фотографию, как длинный скриншот сверху до низу с прокруткой.
На эту тему уже есть отличный текст habr.com очень рекомендую.
Использовать сетки для "посмотреть чо умеет" - отлично. Использовать сетки для "восстановления" - нельзя ни в коем случае. В самом лучшем случае - с человеком, который абсолютно точно знает что было на кадре и проверяет результат придумывание сетки на мотив представленного.
Использовать сетки для "посмотреть чо умеет" - отлично. Использовать сетки для "восстановления" - нельзя ни в коем случае. В самом лучшем случае - с человеком, который абсолютно точно знает что было на кадре и проверяет результат придумывание сетки на мотив представленного.
Как уже много раз говорилось, нельзя получить ту информацию, которой нет. Это касается хоть изображения, хоть звука, хоть чего угодно.
Для проверки можно взять любое не слишком плохое фото, размыть его, а потом попробовать восстановить.
Для проверки можно взять любое не слишком плохое фото, размыть его, а потом попробовать восстановить.
На самом деле на молодого Тихонова стал похож.
Рисовать поверх размытого пятна какое-то другое лицо - оно зачем?
А вот улучшение не катастрофически размытых изображений будет уже вполне качественным. Скажем, использовать эту технологию для увеличения фотографий, апскейла видео или исправления промахнувшегося фокуса.
Но даже и при сильном размытии, как на этом примере со Штирлицем, можно вполне адекватно "восстановить" лицо, если напичкать нейронку качественными фотографиями Тихонова.
Имено это делает и нейронная сеть в подобных программах
Просто поиграть и посмотреть на прикольный результат - ну ОК.
А в плане восстановления фотографий?
Удалять дефекты, повышать резкость - это здорово.
Рисовать поверх размытого пятна какое-то другое лицо - оно зачем?
Разумеется. Но тут работает принцип пиксель-арта: мы видим некие опорные точки, на основе которых наш мозг дорисовваает изображение, руководствуясь нашим опытом,- составляет фооторобот из паттернов.
Имено это делает и нейронная сеть в подобных программах.
Имено это делает и нейронная сеть в подобных программах.
Как уже много раз говорилось, нельзя получить ту информацию, которой нет.
Но если алгоритм хотя бы убирал трещины/пятна/мелкие дефекты, увеличивая четкость - уже было бы неплохо для реставрации.
Из виденных мной программ для реконструкции лиц по фото наиболее аккуратно и деликатно справляется PhotoApp, но он обрабатывает только лица, не трогая окружение. Ну зерно только подглаживает.
я бы подобных результатов смог бы добиться в "Фотошопе",
Мне тоже кажется, что "добиться в фотошопе" такого результата нифига не просто. Тут недостаточно просто подвигать ползунки резкости, или контраста.
Что-то похожее и с лучшими результатами давно существует на MyHeritage.
Пока ещё, скорее, нет. То есть, понятно, что подобные системы на основе AI - за ними будущее реставрации старых фото и видео, но эта конкретная реализация - всё-таки нет. Слишком искусственно выглядят результаты на большинстве снимков - но уже есть приятные исключения, и это радует.
К сожалению он много чего не умеет, что было бы легко делать ИИ - например, тиснение с фотки убирать. Но, я думаю, скоро и такое сделают.
А в целом у меня впечатление, что лицо он не вытягивает, а дорисовывает готовыми заготовками из своей библиотеки. Выходит красиво, но недостоверно. А все, что вокруг лица он поправить не умеет и оно только хуже становится. (Для фото в плохом состоянии)
А в целом у меня впечатление, что лицо он не вытягивает, а дорисовывает готовыми заготовками из своей библиотеки. Выходит красиво, но недостоверно. А все, что вокруг лица он поправить не умеет и оно только хуже становится. (Для фото в плохом состоянии)
видимо, лицо в профиль оно не опознает как лицо. А в его библиотеке заготовок есть только лица и только анфас
Оно ещё не умеет если человек не в камеру смотрит. Фото в профиль вообще не вытягивает.
My Heritage Deep Nostalgia позволяет и очищать, и окрашивать ч-б, и оживлять.
Зачем Райан Рейнольдс в женском парике.
My Heritage Deep Nostalgia позволяет и очищать, и окрашивать ч-б, и оживлять.
Зачем Райан Рейнольдс в женском парике.
7 человек на фото, 2-е слева не очень похожи на оригинал
У AI грандиозное будущее.
Подобные онлайн сервисы восстановления фотографий существуют уже несколько лет.
Есть и сервисы для восстановления цвета черно-белых фотографий, напр
www.myheritage.com
Я давно жду, пока появятся хардварные коробки ремастеринга аудио в реальном времени.
Включаешь какую-то старую некачественную запись, а слушаешь уже прилично восстановленный звук.
Подобные онлайн сервисы восстановления фотографий существуют уже несколько лет.
Есть и сервисы для восстановления цвета черно-белых фотографий, напр
www.myheritage.com
Я давно жду, пока появятся хардварные коробки ремастеринга аудио в реальном времени.
Включаешь какую-то старую некачественную запись, а слушаешь уже прилично восстановленный звук.
очень похожий
Какого цвета глаза у прототипов античных статуй? Можно раскрашивать всеми цветами радуги, но это фантазия на тему, а не восстановление.
Ч/б фото - аналогично.
"Исходного" это как
Включаешь какую-то старую некачественную запись, а слушаешь уже прилично восстановленный звук.
"Исходного" это как ) С чем сравнивать?
Если это был оркестр но нейросеть вполне может перегнать в очень похожий проект для синтезатора.
что-то по ссылке не то
восстановление цвета черно-белых фотографий
Интересно, что оно сделает с пейзажем/натюрмортом? Или чисто на перешарпливание портретов заточено?
Самому пробовать лень...
Самому пробовать лень...
Если попробовать (один раз) лень, то пользоваться (неоднократно) тем более будет лень.
"Вот такие субъекты, как ты, и тормозят мировой прогресс. Вспомни-ка о человеке, который впервые попробовал немецкую сосиску!" 😄
"Вот такие субъекты, как ты, и тормозят мировой прогресс. Вспомни-ка о человеке, который впервые попробовал немецкую сосиску!" 😄
Проверил на своих старых фото. Хорошо алгоритм работает, буду пользоваться.
Имхо, получаются немного другие лица. Особенно парень (который с ребёнком).
Мне кажется, что в основном он усиливает локальный контраст и грамотно повышает разрешение. В общем-то небогатый набор. Таких готовых фильтров много.
Мне кажется, что в основном
На myheritage подобный инструмент есть года два уже, кажется. Там он очень хорошо работает. Плюс еще есть приличная расцветка чёрно-белых фото. Правда все уже в платной версии, хотя был долгий бесплатный промо период
Причём Алекс о нем и рассказывал. Там ещё оживление фоток было.
Херня получилась.
Голливудский штамп про увеличение четкости видео с камер наблюдения практические уже реальность.
А ещё в CSI (Майямском) при выстреле из РПГ была отдача! и синяк под глазом от прицела! Но мы же их любим не за это... 😄
мы ту тс ребёнком смотрели Бегущего по лезвию 82 года. Герой сидел и рассматривал фото. Управлял голосом. Сильно увеличивал. Но пошёл ещё дальше CSI - он заглядывал за угол на фото и за мебель))))
Молодой Экслер похож на старого Галкина. 😄
Говорят, Галкин - это один из пяти Экслеров.
😁😁👍
Да, до восстания 1773—1775 годов.
Молодой Экслер похож на старого Галкина. 😄
Старого Галкина, в смысле, допугачевской эпохи?
Прикольно, собственно, зашел прокомментировать, что первое фото - Галкин, Макс.
Молодой Экслер похож на старого Галкина. 😄
Теги
Информация
